张学良将军潜心研读明史的同时，仍然记挂着没齿不忘的国难家仇，恨不得插翅飞到抗日的疆场和日本鬼子拼个你死我活。他当然清楚，没有蒋介石的批准是有翅难飞的。他和心爱的“小妹”——赵四小姐密商，买了一块精制的金表，烦人送给蒋介石，“暗示时间不早了，该放我了”。蒋介石极度聪明，学着张学良的办法，只回赠了数根外国钓鱼竿，“意谓不要急，再养养病、钓钓鱼吧！”
一九四一年五月，“张学良患急性阑尾炎，绮霞陪他在贵州中央医院做手术。出院后，他们又被囚禁在贵州黔灵山麒麟洞、开阳刘育乡，一九四四年冬迁至贵州桐梓，在桐梓天门洞一直软禁到抗日战争胜利”。
张学良将军在桐梓的软禁地名叫“小西湖”，位于城东北乱山环抱之中，杳无人烟。“湖面积百余亩，四面是高山，西面是一块不小的平川地。仿照西湖格局，湖中建湖心亭，搞了一个‘三潭印月’，湖心亭的对联是：一湖西子水，半壁桂林山。湖的沿岸遍植杨柳，西岸边修了一个‘柳浪闻莺’，附近还修了跑马场、篮球场和网球场等设施。湖的东面山上是两个巨大的洞，深七十多米，两头见天，名曰上、下天门洞，下有天门河，湖水即由此引入。山峰上修了望湖亭、放鹤亭，山上有返照岩、金家岩、天桥、天门溶洞诸名胜。在湖的西北山坡上修了一幢新式的平房，供大批特务居住。他们组设了副官组和巡逻队，周围岗哨密布，警卫森严，任何人不得擅自入内。”
所谓副官刘乙光是个极坏的家伙，为了在精神上折磨张学良将军和赵四小姐，“经常采取一些过分的做法，比如限制他们在规定范围内的行动自由，克扣外间寄给他们的衣物食品，特别是放任自己患疯病的老婆及无知的孩子，常常吃饭时在桌上胡吵胡闹，致使张学良、绮霞无法进餐”。诚如当事人所记述的那样：
在与世隔绝的寂寞中，再加上种种非人的待遇，张学良和绮霞的凄苦是可想而知的。他们只得两人相依为命。张学良把一切希望和欢乐都寄托在绮霞身上，绮霞则尽自己的全部力量给张学良以安慰和照料。张学良是个精力充沛、兴趣广泛并且好动的人，凡是张学良需要做的，绮霞就陪着做，跟着学，做到样样都会，都能跟着来。张学良在囚禁中不时用英语会话，绮霞就学习英语，随时和张对话；张学良要打网球、排球等，绮霞就陪他对打；张学良研究明史，写文章，绮霞就给他购买书籍，查找材料，帮助做一些文字工作；到了张学良厌倦读书，喜欢文物古玩的时候，又是绮霞去帮他采买、鉴定和收藏。
在软禁中，许多生活琐事都得绮霞自己动手；而绮霞在这种情况下，显得什么都会干，并且做得很好，比如仿照新的式样缝制衣服、烹调可口的菜肴等等。张学良使用假牙，保养假牙要用一种细线绳，这些线绳都是绮霞一根一根地用手捻成，然后打上蜡料备用。
……
这无疑会给孤寂中的张学良将军带来最大的慰藉。但是，他内心依然压抑着报国无门的极大愤懑。最后，他只好借吟诗发泄。当时，有两首诗作流传于世，曾轰动山城，波及全国。现恭录如下：
发芽
盼发芽早，
愿根叶
长得茂；
深耕种，
勤除草，
一早起
直到
太阳晒的
似火烧，
呀，
芽，毕竟发了！
抢粪
到处打主意
抢粪
偷尿
活像强盗。
在人前夸口为的
那样菜
是我的顶好，
呱呱叫。
这两首新体诗，文字通俗易懂。张学良将军以“发芽”比喻抗战胜利，以“抢粪”讽刺国民党蒋介石抢占胜利果实，有由衷的喜悦，也有辛辣的讽刺，令人寻味不已。大戏剧家田汉读罢感慨万分，当即写了一首七言律诗，对张学良将军的不幸遭遇寄予无限同情，对蒋介石长期监禁张学良的卑劣行径予以鞭挞。恭录如下：
某公近从息烽过，
带来将军消息多；
挑灯辛勤读史记，
下笔辄复成新歌。
使君学圃岂得已，
子牙垂钓悲蹉跎。
独疑胜利复员日，
长系壮士将如何？
一九四五年八月，日本宣布无条件投降。张学良将军认为获释有望，心情为之一畅。同时，全国掀起了请释张学良将军的热潮。曾任东北大学秘书长的周鲸文和一些关心张学良将军的东北人士，发动援助张学良恢复自由的活动，并请中共领袖人物周恩来、董必武予以援助。周恩来副主席除去在山城召开的政协会议上呼吁而外，还在一九四六年纪念西安事变十周年的大会上发表演讲：
“西安事变是蒋介石自己逼成的；蒋介石抗战是张、杨两将军顺从人民公意逼成的；
“张、杨两将军是有大功于抗战事业的。”
面对山坡掀起的请释张学良将军的热潮，蒋介石是有着自己的想法的。他就像是绝不做蚀本生意的政治奸商那样，开出了恢复张学良将军自由的价码，请东北资深元老莫德惠做中间人，去桐梓打着看张学良将军的幌子，去洽谈这笔颇有分量的政治交易。
这时的张学良将军已幽居近十年之久，虽说精神尚好，但已满头白发。他“闻知故人来访，心情至为兴奋。当他奔跃车前，热烈迎迓莫老时，已是泪流满面了。当晚张氏接读莫德惠带来的一些友好来函，情绪激动，一夜未能入眠。”
翌日，莫德惠在进入洽谈正题之前，故作笑颜地问：
“汉卿，家乡光复了，你一定很高兴吧？”
“高兴，我太高兴了！”张学良说罢旋又叹了口气，“可是，在这山河光复之时，我张学良有愧于国家和乡亲啊！……”
张学良将军言之有愧，是指自己未能对伟大的抗日战争贡献力量。最近，他在接受美国之音采访，谈到此事仍愧疚地说：“我当然很痛苦，我恨日本军阀，一生主要就想抗日，心中最难过的就是中日战争我没能参加。”
莫德惠自然了解张学良这种特殊心情，他听后叹了口气，遂缄默不语。
“行前，你见到委员长了吗？”张学良将军有些忐忑不安地问。
“见到了，”莫德惠显得是那样的沉重，“从某种意义上说，我是奉委员长之命来看你的。”
“他对我的事是怎么说的？”张学良将军迫不及待地问。
“他说，时下可以还你自由，但必须答应他三个条件。”
“哪三个条件？”
“一、委员长要你公开承认，西安事变是上了共产党的当；二、交出‘九·一八’事变前夕，委员长给你的那则不准抵抗的电报；三、释放以后，你必须出洋。”
张学良将军听罢陷入了长时间的沉默。他权衡利弊得失，陷入了是要自由，还是继续过“管束”生活的矛盾之中……
西安事变“谋变事前，并未同共党讨商”，这是历史事实，也是张学良将军始终如一的看法。即使是到了今天，他依然认为：“事变共产党开始并没有参加。事情起来了，我们才把周恩来先生接来，谈此事该怎么办。”大丈夫光明磊落，敢作敢为，这是张学良做人的信条，他决不做这种篡改历史的事情。况且，共产党、周恩来这个朋友没有做任何对不住他的事，他怎么能为了换得个人的自由而栽赃朋友呢？另外，他清楚蒋介石要他承认此事还有一个目的，那就是为发动内战提供口实。他决不会为换取自由，而放弃“反对内战，拥护统一”的主张。
谈起蒋介石所关心的那则电报，张学良将军更是耿耿于怀，终生不忘。“九·一八”事变爆发时，张学良因执行这则电文命令而背上了“不抵抗将军”的骂名。他出于忠君体国的思想，从未把“九·一八”事变的历史罪责推到蒋介石的身上。伟大的抗日战争结束了，蒋介石为了塑造抗日民族英雄的伟大形象，他想销毁这则电文。作为历史，谁也无权、而且也不准伪造历史以欺骗后人！因此，张学良将军无法接受这一条件。
谈到出洋这个条件，张学良将军认为是无所谓的。他历经痛苦的思索，遂掷地有声地答说：
“请转告委员长：自由虽然可贵，名节更重于自由。我就这样随遇而安地生活吧！”
二
就在张学良将军严词拒绝蒋介石的三个条件不久，蒋介石明令指示保密局局长郑介民：把张学良解往台湾。
郑介民致电重庆军统局结束时期的办事处主任张严佛：“委员长指示：张学良应即解到台湾去。已通知刘乙光与兄接洽，先把他解到重庆，候兄交涉赴台湾专机，然后由刘乙光起解。”
刘乙光遵命把张学良将军送到重庆，住在歌乐山戴笠生前的寓所。
张严佛原先是西北总部机要组内由戴笠挂名的第三科首任秘书、代理科长，实是复兴社特务处西北地区的负责人。名义上是张学良将军的部属，而且他们之间相处还好。但是，作为政治问题是没有私人感情可谈的，张严佛只能装出伪善的样子，欺骗说：
“副座，委员长有电报来，让送您去南京。”
张学良将军信以为真，十分高兴。在留住重庆的日子里，还会见了几个昔日的朋友，虽相对无语，但内心还是高兴的。他给客人留下的印象是：“面容憔悴，头发已花白，牙齿已掉了一半，抑郁的心情时有流露。”赵四小姐给人的印象是“更加消瘦，衣着陈旧”。时光已耗去她芳菲的年华。他们二人在重庆住了一个礼拜，被特务解往台湾。行前，刘乙光正式告之赴台的消息之后，张学良气得“愤怒地用力拍了一下桌子，牙咬得紧紧的”。“他回房告诉赵媞时，气得声音还在发抖。”
每逢遇到这种情况，赵一荻就变成了张学良将军顺理郁闷之气的人。今天，她依然使出全身的解数，让张学良将军知道发脾气解决不了问题，阶下囚总是阶下囚。最后，她又很有分量地说：
“我们为什么要生气呢？只要你高兴地生活，有些人就舒服不了！”
张学良将军终于克制住了自己的愤怒，静静地呆坐了一会儿，遂朝着企盼自己回答的赵一荻点了点头，说：
“好吧！就到郑成功退守的地方去。”
张学良将军飞抵台湾以后，被“管束”在新竹市井上温泉。
井上温泉风景优美。“一座平房，山峦环抱，树木葱茏，房旁有温泉可浴，环境十分幽静，根本没有居民。警卫森严，一如往昔。”但是，这美丽的环境并没有给张学良将军和赵四小姐带来欢愉，相反，十年“严加管束”期满而刑无期的打击实在是太大了！他的“额上、面上已出现好些皱纹，瘦多了，老多了，眼睛也小了（据说是害了眼病的结果）”。就说性格开朗、雍容大度的赵四小姐吧，“身体不太好，瘦得可怜”。连过一架空中吊桥都望而生畏。对此，当事人曾做了如下记述：
我和母亲、斌妹、赵四小姐沿着小路上山去散步，走到一架一百五十米长的空中吊桥前，斌妹和我毫不在乎地放大步子走了过去。赵四小姐有心脏病，简直不敢动一步，慢慢地叫一个人扶着，走了一截竟头昏眼花，心跳不止，只得缩回。休息了一会，她见我母亲也平安地走了过去，于是她鼓起勇气，仍叫人扶着，勉强走过桥头。
……
不久，台湾爆发了“二·二八”起义，张学良将军和赵四小姐险些死在刘乙光的枪下。对此，张学良将军控诉说：
台湾人闹事，刘乙光也紧张起来了。那几天，他恶狠狠地盯住了我，好像要把我吃下去，话都不和我说了。他指挥宪兵特务不分昼夜，加倍警戒，如临大敌，宪兵特务来回不停地在我屋子周围巡逻，并向室内窥伺动静。夜深了，我还听得刘乙光同他的部下时而嘈杂喧嚷，紧急集合；时而又蹑手蹑脚地窃窃传话。总而言之，是一种应付非常事件的可怕现象。就在这个时候，刘乙光部下和宪兵方面有人偷偷告诉我说：刘乙光已经做好了准备，如果台湾事变闹到不可收拾的时候，为了防止我越狱逃跑或台湾人把我劫走，他就采取紧急处置，把我和四小姐于混乱中开枪打死，对上面报告则称台湾乱民前来劫狱所为……幸而台湾事变几天就平息了，否则真难说我今天还能够同你在这里见面。
……
由此，张学良将军和赵四小姐的处境越来越艰难了。刘乙光以为山高皇帝远，对张学良将军和赵四小姐的迫害越来越明目张胆了。请看张学良将军的如下控诉：
我们一到台北，陈仪主席陪我们来到这里，他当着刘乙光对我说，这个地方是委员长来电叫他找好的。……交代刘乙光说，光线好的房间给我住，刘乙光满口答应了。但陈仪走后，一转眼间，刘乙光就变了卦，他夫妻儿女竟占住了我现在所住的这几间，硬要我和四小姐住边房，还有什么可说的，我只好自己忍受了。幸而不几天，陈仪又来看我，他觉得刘乙光做得不对，叫他把这几间房让给我们住。初来的时候有两名下女，陈仪雇来照料我和四小姐的，不几天，被刘乙光打发走了。十几年来，夫人（指宋美龄）和亲友送给我的东西，常被刘乙光夫妇克扣，有时被截留一半，有时竟全部被没收了，与来信所写的对不上数……我们每次吃饭，刘乙光一家六七口，大的十几岁，小的一两岁，都同我们一桌，他们吵吵嚷嚷，抢着吃，这些事不值得一谈，可是搞得太脏了，我同四小姐几乎每顿都吃不下饭。刘乙光的老婆有时还指桑骂槐地骂小孩，而暗地却是骂四小姐。
……
刘乙光仗势欺压张学良将军和赵四小姐的行为，终于声扬了出去。郑介民匆忙指派和张学良将军关系尚好的张严佛，暂代刘乙光，并进行考察。张严佛对此回忆道：
刘乙光走的那个晚上，我在张学良的房间里，他当着赵四小姐，仿佛满肚子幽怨，都向我倾泻了。他谈到十年期满仍然关押不放，也谈到了十几年的囚禁生活，受尽了刘乙光夫妻百般凌辱和精神虐待，含冤抱屈，无处申诉，几乎一字一泪，痛哭不止，赵四小姐坐在一旁揩眼泪。当晚，我们谈到深夜，足有四五个钟头。第二天午饭后，我又到张学良房子里去，他用毛笔在信纸上写下了夜里他自己做成的一首诗交给我。他说：“你这次来算是难得，这首诗就留做纪念吧！”诗是这样写的：
山居幽处境，
旧雨引心寒；
辗转眠不得，
枕上泪难干。
上款写“严佛兄存念”，下面是“张学良敬赠。”
