许攸曾经答应过王一中将赵毅带到成年，且几年来王一中忠心侍奉也是入了许攸之眼，迁至永州城自然也是戴上了赵毅。
傍晚回到住处之后，王一中再次告诫赵毅道：“此番前往永州城路途遥远，路上切勿随意走动，必须与我半步不离。同行之时也莫要与少爷玩闹，引人不快。与许府同行的还有张家，切记莫要接触张家之人。”
赵毅点了点头，虽然前路陌生，但是只要是跟随着乾爷爷，赵毅就已经满足了。
靖难三年二月十二日宣布许府迁移，只到二月15日许府上下才准备完毕。一行六十多人于卯时出发，卯时三刻出了扶云县县城大门，与张家队伍一前一后的向北朝着永州城而去。
许府上下十架马车，三架为许攸家眷妇孺，家主许攸单独一架，大夫人张氏与许幕一架，二夫人乔氏与许白一架。书籍文卷一架，财物及粮食六架，在许三的安排下王一中、赵毅和许奉幕三人一架，其余人并无车架。
张家也大体如此，而县丞张家的张与许府大夫人张氏的张乃是同一个张。
扶云县至永州城两百多里，一路行走官道，日出而行，日落而息，路上不时补充一些粮食物资。唐国境内清平依旧，并无匪患，历时十日与二月二十三日抵达永州城。
赵毅谨遵王一中教诲，除方便之时从不远离马车。路上风光初时有趣，时间一长就无甚乐趣。
进入永州城之时，城墙较之扶云县城高大许多，城内也是热闹许多，但赵毅听从告诫也只是偶尔透过缝隙查看了外界几眼。
许府在扶云县乃是县尉府邸，但是到了永州城也只能低调，许府与张府新的府邸也不似在扶云县繁华，环境也差了许多。
在永州城安顿三日之后，许攸以及原扶云县县丞张涵各自领着人奔赴长安，许攸带走了许大和许二，留下了王一中与许三。
许攸走了之后，王一中依照许攸安排需要参加学宫考核，一试举人功名。而永州城内学宫名为阴山学宫，王一中自然要前往学宫登名入册。
或许是想到到了学宫之后可能面临怎样的窘境，王一中选择孤身一人前往阴山学宫。
许府众人并不知道王一中在阴山学宫之中遭受了怎样的奚落，回来之时整个人仿佛失了神，回到住处，坐在椅子上显得是那么的落寞。
其他人将此事告知了大夫人张氏，大夫人张氏让许三开导勉励王一中一番。
许三来到王一中住处，说了一番话之后便离去，表面上王一中已经彻底放下，甚至笑着将许三送出。
等到赵毅回来之后，王一中痛心疾首地告诫道：“万般丑恶尽加吾身，不敢让孙儿因我受辱，出了许府之后，毅儿便莫要再认我这个爷爷了。”