1936年12月31日， 張學良被送上了南京的軍事委員會審判， 此時， 他從西安帶來的秘書和副官等人， 也全都被繳械了， 從此張學良開始了被軟禁的生涯。
張學良在失去自由之初， 情緒是非常低落的， 每次飯菜都吃的很少， 起初張學良睡覺有個習慣， 每次都把穿的背心墊在床上， 然後自己睡在上面。
特務們以為背心裡有什麼秘密， 於是就搜查了背心， 張學良此時再也忍不住了， 大聲罵道：“你們真缺德， 真缺德！”足見他的情緒已經很不好了。
後來張學良被轉移到了奉化溪口的雪竇山， 並且他的妻子于鳳至和趙四小姐獲准可以探望他， 有了女人的陪伴， 張學良的心情要好很多。
除了讓兩個女人輪流陪伴外， 在張學良的個人生活居住方面， 在溪口雪竇山時， 蔣介石花費鉅資包下了山上的旅館， 用6間客房改造成了張學良的住房， 當然也為了方便監管。
張學良住處的傢俱都是不錯的， 衛生間用的是抽水馬桶， 還有取暖的壁爐， 而負責擔任警戒的特務連隊， 則是住在雪竇寺裡面， 環境要差很多。
這些警衛的裝備都很好， 一共30多個特務， 配有50支快慢機槍， 外加兩支衝鋒槍和高射機槍， 彈藥也是相當充足， 這樣的陣勢，
為了軟禁張學良， 蔣介石也是下了本錢的， 由於張學良喜歡打網球， 這在當時可是一種奢侈的運動， 蔣介石下令為張學良修建了網球場， 還建了其它設施。
夏天的時候， 張學良喜歡游泳， 後來特務們又在住處為張學良挖了個游泳池， 在無聊的時候， 張學良也會和警衛特務一起下象棋， 不過所有警衛， 沒人是張學良的對手。
在吃的方面， 張學良各種要求幾乎都能滿足， 他喜歡吃的美國蘋果， 喝可樂汽水等都有， 這些當時罕見的東西， 在張學良面前都不算什麼。
蔣介石曾說， 用一個步兵團的經費， 來維持張學良的生活開銷， 後來由於形勢變化， 1946年， 張學良被轉移到了臺灣新竹縣五峰鄉桃山村， 在這裡渡過了近11年之久。
在這裡張學良的生活待遇依然不錯， 由於遠離城鎮， 張學良在這裡時常帶著斗笠種菜和垂釣， 他和趙四小姐甚至還養了許多雞， 仿佛過著男耕女織的生活。