1936年12月25日，张学良送蒋介石回南京，一下飞机便被送到宋子文公馆，在这里住了5天，到了12月31日，他被通知去军事委员会开会，进去之后才发现不是开会，而是军事法庭对他进行审讯，最终被判处10年徒刑。
之后，张学良被送到腾空了的孔祥熙公馆，这算是张学良被“判刑”后的第一个囚禁地点，本来应该是绝对保密的，但消息还是传了出去，他在南京中央党校受训的弟弟张学思闻讯赶来看他，却被宪兵挡在了门外。
1937年1月，国民政府委员会一致决议通过：张学良判处十年有期徒刑，特予赦免，担保仍需交军事委员会严加管束。为了切断张学良与外界的任何联系，蒋介石把他送到老家浙江奉化”读书悔过“。
张学良在奉化溪口“读书悔过”的日子，住过武岭学校，后来移居雪窦山中国旅行社招待所，之后蒋介石允许了他的夫人于凤至跟赵四小姐与他同住。两人商量一番后，决定每月一替一换，轮流陪伴张学良。后来，于凤至为了使赵四小姐更好地抚养幼子，便说服她返回上海，自己留了下来。
说“读书悔过”那就真的是“读书悔过”，老蒋给张学良安排了一个清代老进士，每天安排一个半小时《论语》、《中庸》课程，但这位老先生只坚持了不到一周就自觉没趣下山了。
同年10月，中国旅行社招待所失火被烧毁，军统决定把张学良转移到黄山。在黄山，张学良被安置在段祺瑞修建的准备退隐后的学佛谈经之所。谁知，刚住一晚，第二天早上，蒋介石亲自打电话，命令马上离开黄山，去江西萍乡待命。
据说，当时有一部分东北军在安徽驻防，蒋担心他们会武装“抢劫”张学良，三天后，张学良被迫上路。
在几十名军统特务和100多名宪兵“保护”下，张学良经过几天跋涉，来到萍乡。因为事先没有做安排，一时间没有住处，所以只能在萍乡最热闹的大街赵了一家叫赣西饭店的大旅社。
但由于旅店里人多混杂，后来再城内专员公署附近一个巷内找到了一所房子，叫“绛园”，“待命”不到一个月，军统来电，命令立即迁往湖南郴州。
1938年1月，张学良被转移到湖南郴州苏仙岭苏仙庙内。在这里，发生了一件事情。一天，张学良要下山到城内洗澡。行至途中，有一个佩戴国民党炮兵中校领章的军官迎面而来。
发现张后，立即向张恭敬地立正敬礼，张非常镇静，若无其事地走自己的路，并未理会那个军官，但这却把特务们吓得手足无措。
特务们唯恐出事，赶忙将张重新押回山上，当晚由宪兵连增加岗哨，紧张了一夜，第二天查看新住地，第三天就转移到了郴县，然而又住了不到一个月，军统局在此指示迁往沅陵 。
张学良被安置在了沅陵凤凰山上的凤凰寺，此时军统对张学良的生活待遇已经逐步下降，远不如以前，本来就被幽禁不得自由的他心情更差了，只能接钓鱼来消磨岁月。
后来由于日军节节进攻，战线步步后撤，张学良的囚禁地又开始向西转移。
1938年末，转移到了贵州修文县阳明洞，三年的幽禁生活不仅是在折磨张学良，也使得于凤至受到了极大伤害，乳房烂疮日渐加重，张学良便向戴笠提出，让于凤至出去治病，由赵四小姐来照顾自己生活。
1940年冬，赵四小姐到来，此后就再也没有离开过张学良，1941年，张学良得了急性阑尾炎，到贵阳治病。
阑尾炎虽然不是什么大病，但由于耽误了最佳治疗时间已经开始化脓 ，形成局部性腹膜炎，所以只能开到刀将脓印出，两个月后又第二次开刀切除。
为了治疗方便，张学良提出留在贵阳的要求，得到了蒋介石的批准，出院后就住在了紧靠市区的乾灵山麒麟洞。
张学良在贵阳的消息，逐渐传扬出去，蒋介石大为不满，命令戴笠将张学良转移到与世隔绝的穷乡僻壤去，不让世人知道他的踪迹。
1942年2月，张学良再次踏上了“搬家”的道路。
张学良先是在开阳县刘养育乡过了一段养鸡种菜的日子，但不久就被送到了恶名远扬的贵州息烽集中营。
息烽集中营就真的是远离人间，就在山窝里，杨虎城，以及几位重要政治人物都先后在这里待过。张学良在这里被列为特别优待修养人，有自己院落，有媳妇可以陪住，当然，军统的监视也很严密。
1944年，一小队日军曾跑到了黔南一带，使贵阳一日数惊，蒋介石怕出事，便又让张学良搬家。
这一次，搬到了桐梓。在这里张学良经历了抗战胜利，以及送礼物搭配小卡片（长信）提醒蒋介石该放释放自己了，毕竟10年刑期已经到了。
然而老蒋没给他回信，只送给了他回礼，一本1936年的日历和一双绣花鞋，当年的事情没有忘，你还是继续过幽禁生活吧。
1946年11月，在不知情的情况下，张学良和赵一荻被秘密从重庆转移到了台湾，进入了更秘密的幽禁岁月。先被送到新竹县井上温泉，到了1949年2月2日又被转移到高雄，藏在寺山要塞的兵舍内，第二年一月又搬回了井上温泉。
1960年，搬到台北近郊北投，1961年9月，被批准能与自己的家书见面，到了70年代，对他的看管才慢慢放开，被允许见更多的人，1990年，张学良结束幽禁生活而能够公开露面，最后再夏威夷定居。