离开浙江溪口，蒋介石又把张学良迁移到安徽黄山。
这时，赵一荻正在上海陪伴儿子，张学良是在于凤至的陪伴下走上迁移之路的。
此后的很长一段时间，张学良开始了颠沛流离的幽禁生涯。从南京出发，先是浙江奉化溪口，之后是安徽黄山，然后是江西萍乡、湖南郴州苏仙岭、湖南沅陵凤凰山、贵州修文阳明洞、贵阳黔灵山麒麟洞、贵州开阳刘育乡、息烽集中营、桐梓无门洞小西湖。常常是张学良在一个地方刚刚熟悉了那里的环境，蒋介石的一纸手谕就来了。在那些从来没有听说过的陌生的地方，张学良像一个可以被随意挪动的棋子，蒋介石想把他挪到哪儿就挪到哪儿。蒋介石就是要这样折磨他，通过这种折磨，让他对自己在西安事变中的行为懊悔。张学良不过幽禁了他几天，他却让张学良用一辈子来偿还。
刚开始迁移的时候，张学良还有旅游的心情，感觉自己像一个游客，后来他心里的惆怅越来越重。自古以来，哪有这样被监禁的？古代被贬谪幽禁的，流放到一个地方也就罢了，像这样三天两头折腾来折腾去的，路途上的劳顿也能把人的意志折磨垮。
从溪口到黄山的时候，因为是一把大火把过去的住处烧得一塌糊涂，不得不迁离那个地方，张学良的心情还不算糟糕，和溪口比较，他更喜欢黄山。即将入驻的那个地方叫听涛居，现在如果去黄山旅游，还能找到那个地方，只是看上去已经有些岁月的沧桑。现在，那个地方还有一个名字：张学良幽禁处。
这个小别墅当时还算是比较时尚的建筑，原本是为蒋介石来黄山避暑建造的，蒋介石忙于“剿共”抽不出时间来住，就送给了皖系军阀段祺瑞。段祺瑞本来是想退隐后到这个地方学佛谈经的，结果还来不及居住就驾鹤西游了。这地方幽静偏僻，离南京又不远，便于蒋介石监控，做张学良的囚禁地是最合适的。由军统特务头子戴笠亲自负责，派了专门的军统特务押解张学良奔赴黄山。
很长时间没有见过外面的景色了，张学良显得有些兴奋，走到黄山脚下的屯溪，他特意要求去那里游览一下。在于凤至的陪伴下，张学良行走到屯溪老街的那一刻，他几乎忘记了自己此时的境遇。在卖精美的工艺品和时装的店铺前偶尔停留一下，他会想起赵一荻，这些店铺都是她喜欢逛的，如果她在身旁看到这么多精致好玩的东西，一定高兴得像个小女孩。
赵一荻不在，时装和工艺品商店就不必逛了，张学良在自己感兴趣的旧货摊、古董摊前停留下来，徽墨、歙砚买了一些，然后开始上黄山。他以为此去怎么也得在这里住上一阵子，购置的这些文房四宝是为打发寂寞时光预备的。
张学良刚住进来，他过去东北军的部下有驻防安徽的，便悄悄来探望他。消息很快便传到了蒋介石那里，老蒋从电话中得知这个消息，感觉大事不好，他忽略了这里还有驻防的东北军，如果他们去武装劫抢张学良，那就有了大麻烦。蒋介石立即命令戴笠带着张学良马上离开黄山，这个地方不能久留。
在黄山住下来，还没来得及认真看一眼别墅周边的景色，张学良就被告知要离开这个地方。这一次，张学良心情非常糟糕，在南京和溪口的时候他还没有被囚禁的感觉，这回蒋介石一声令下，他在押解人员的严密监控下离开黄山，他深深感觉到自己失去的不仅仅是自由，还有尊严。这一次，押解人员把守得很严密，防范东北军有什么小动作，在人不知鬼不觉的状态下，张学良仅仅在黄山住了三天，就赶往江西萍乡。
这一次，押解张学良的阵容比较强大，由几十名特务和百余名宪兵“保护”，队伍有些浩浩荡荡，这是张学良被幽禁以来随从最多的一次。至于蒋介石为什么脑子一热把张学良一路奔波转移到这个地方，很令人费解，因为这个地方不像溪口和黄山一样有闲置的建筑，这里实在找不到合适的关押点。猜来想去那个地方不过是临时动议，一是因为那里是抗战的后方，二是离开黄山后要去一个东北军想不到的地方，免得他们去解救张学良，三是那个地方比较偏远便于隐蔽。这支阵容强大的押解队伍来到萍乡后，发现他们的到来太显眼了，本来就不大的小城一下子出现这么多陌生人。张学良被临时安排在旅馆住下来，这一住就是一个月，直到军统又来电让他们迁往湖南郴州。
郴州的苏仙岭苏仙庙景色优美，只是条件没有过去住的地方好，洗澡都成问题，还要到山下的县城去洗。某一日，张学良被押送去县城洗澡行走在街面上，居然遇上了一个认识张学良的国民党炮兵中校军官，他向张学良敬了个军礼，把陪同的特务吓得如惊弓之鸟，如临大敌般立即向军统汇报。
这个地方居然有人认识张学良！看来这里也不安全，继续转移。军统局又下达指令迁往沅陵。
在一个地方住习惯了，张学良真的不想走，但是现在他说了不算，一切都要听从蒋介石的安排，他说让你走，不走也得走。
离开郴州前，张学良作了一首诗：
剡溪别去又郴州，四省驰车不久留。
大好江山难住脚，孰堪砥柱在中流。
在湘西沅陵的明代古刹——凤凰寺，张学良也没住多长时间。寂寞中他到河边钓鱼，被过去在报纸上见过他照片的一个学生认出来了，张学良在沅陵的消息迅速传开。这样一来，沅陵也待不下去了，于是他又被转移到贵州修文阳明洞。
从奉化溪口，再到贵州修文阳明洞，这种流浪式的幽禁生活把张学良和于凤至的身体都摧垮了。在郴州的时候，于凤至的抵抗力就很差了，经常感冒发烧，到了贵州这个更加贫瘠的地方，她终于坚持不住了，乳房上生了个烂疮，病情越来越重。因为不懂得是什么病，就管它叫烂疮，其实就是乳腺癌，早期没在意，当然也没有条件在意，等发展到一定程度，病情已经很严重了。于凤至离开这里去治病成为当务之急，如果于凤至走了，谁来照顾张学良的生活呢？张学良提出让赵一荻来代替于凤至。
张学良大致知道赵一荻已经迁到了香港，但现在具体在香港的哪里，张学良并不知道。这几年，家里的一切消息都隔绝了。一想到赵四小姐，张学良心中就有一丝内疚，他觉得自己特别对不起她。自从那年她只身来到自己身边，十年的时间，她吃了太多的苦。没名没分地做着女秘书，连小妾都不算，好处没得到过多少，却要跟着自己一次次倒霉。“九一八”的时候被人们当做红颜祸水，西安事变又跟着自己受牵连。他也有些不忍心让她来这里陪着自己受罪，想想那些曾经的红粉知己们，谁肯在自己最落魄的时候来这里陪伴自己吃苦受罪呢？他把那些和他有过关系的女人们挨个过了一遍，也曾经试探着让戴笠替他询问他认为关系和他很铁的某些女人，但人家都一口回绝了，有的连理由都懒得编一个。最后，张学良认定唯有赵一荻不会拒绝，唯有赵一荻会不顾一切到这里来。
他看得很准，赵一荻一直在苦苦打听他的消息。
张学良现在在哪里，赵一荻也不知道。
她离开溪口回到上海后不久，由于一场大火把溪口的囚禁地烧成废墟，张学良被悄悄转移到黄山，之后又辗转各处。前些年，不管他外出征战，还是落魄到什么地方，他的行踪都在她的掌控之间，她的思念追随他的行踪而去，他的踪迹到哪儿，她的思念就到哪儿。现在他似乎突然在人间蒸发了，一点消息都没有了。她派人四处打听，开始还能打听到他去黄山了，后来再打听，人家说他只在黄山住了几天，然后就不知被押送到了哪里。
赵一荻变得更加沉默寡言了，张学良在她心中不单是她的爱人，也是她的亲人。自从那年父亲声明和她断绝关系，她就变成了无家可归的人，变成了举目无亲的人，她把他看做身边唯一的亲人，后来有了小儿子，她有了两个亲人。如今，一个亲人丢了，没音讯了，她和儿子住在上海的马思路公馆，虽然吃穿不愁，却总觉得自己像个无依无靠的弃妇或者寡妇。
会不会永远就这样下去了，会不会一辈子再也见不到他了？
这样想着，泪水就不由自主地流了下来。
上海已经沦陷了，许多达官贵人都迁离这个地方，亲友们也劝她带着孩子走，到香港去避一避。赵一荻不愿意离开上海的家，她怕自己走了之后，张学良万一让人来找她和儿子，找不到怎么办。
她的想法那么天真和幼稚，深陷在爱情中的女人都会变得很幼稚，她其实是陷在自己营造的爱情中，此时远方正疲于奔波的张学良根本没有心情和精力思念她。后来被亲朋半推半哄的，才勉强去了香港。
香港是她的出生地，那里有过她童年的快乐，带着儿子重新回到这个地方，却是在国破山河碎、家破人离的窘境之下。她没有心思重拾童年的记忆，落寞地在亲友的安置下住下来，她整天没有一丝笑容。
有亲友的照顾，有张学良留给她的一部分钱财，赵一荻在香港的生活算得上舒适安逸。她的三哥赵国梁在香港大学土木工科毕业后，暂时在香港安了家。有哥哥照顾着，赵一荻重温久违的亲情，她荒芜寂寞的内心多少有了些安慰。
赵一荻手头的经费足够她和儿子继续过上当初的上层贵族生活，从上海逃避战乱的那些贵妇们，又开始出入社交场合，跳舞、玩牌、打高尔夫球、赌马……她却深居简出，基本上不出门，有时候会抱着本闲书看上半天，书上究竟写的是什么，她一个字都读不进去，心里还是牵挂着远方的爱人。有时候哥哥怕她这样下去会闷坏了，偶尔会带她去清水湾乡间俱乐部打打球，她也是草草应付一下，心思全然不在球上。
她的心一直放不下远方那个人，因为没了他的音讯，心中更加牵挂他。
这种苦闷的生活一过就是三年，三年的时间，并没有让她忘记他，思念更加深重。衣带渐宽终不悔，为伊消得人憔悴，赵一荻明显比刚来香港的时候憔悴多了。她无心说笑，甚至无心打扮，要知道她是一个非常喜欢打扮的女子，现在却不知道为谁去打扮自己。
三年后的某个日子，内地那边来电报了，一下子来了两封。
一封是张学良的，一封是戴笠的。
还没读到电报内容，她已经喜出望外，盼来盼去，终于盼来了爱人的音讯。她只是不明白为什么张学良和戴笠的电报同时寄达，欣喜之余又觉得蹊跷。心情忐忑地打开两封电报，措辞不同内容大同小异。张学良的电报不是和她叙儿女私情的，戴笠的电报也没有行政命令的语气，大意都是说于凤至病倒了，不能陪护张学良，问她可不可以到贵州去陪着张学良。
她这才知道张学良现在被幽禁在贵州，因为于凤至生病，她才可以作为替补队员准许上场。
电报的内容哥哥也看了，看完就沉默了，说心里话，他是不希望四妹答应这件事的，因为电报用的是商量的口吻，也就是说，赵一荻可以答应，也可以选择拒绝，毕竟儿子还小，这不仅仅是借口，也是事实。
赵国梁探询赵一荻：你是怎么打算的？
赵一荻声音很柔，但是很坚决：我决定去陪他。
赵国梁提醒她：闾琳怎么办？
是啊，闾琳怎么办？赵一荻迅速想着该如何安置自己的儿子，却丝毫没有打过退堂鼓，她第一时间就决定了：她要去贵州陪张学良。
