公孙敖终于过不下去了，他偷偷将家中财物给收拾收拾，打了足足好几大包。然后，有一天晚上趁人不备，带着老婆孩子就离开了孟孙府！
公孙敖去了哪里？莒国，当然是莒国了。这一次，公孙敖相信，自己已经带足了财物，可以过很长很长日子了。
这下把仲孙谷都气晕了过去，自己好不容易从国君那里求得这个情，让你这个不成器的父亲回来，结果你又搞出这么大一只幺蛾子。但不管如何，父亲毕竟是父亲，父亲有再大的错，做儿子的，毕竟得守着一份孝心。
但是，公孙敖毕竟给孟氏家族带来了巨大的负面效应，仲孙谷作为孟氏家族宗主，走在街上把头低着，与人说话把声音压着。虽然是堂堂鲁国卿大夫，但要想在朝堂上为孟氏家族争些利益，那简直是不可能的。
公子遂听说孟氏家里又出了这么大一件糗事，摇了摇头，叹了口气，对鲁文公道：“主公，您看看，这人就这德性。依臣看，此人绝对是脑子有病，以后，就再也不要理他了。”
一不顾国家，二不顾家族，三不顾自己名声，公孙敖在鲁国那算是整个都臭了。但公孙敖也无所谓了，既然如此，那就在莒国重新好好生活吧。
但在莒国的生活才继续了两年，公孙敖的夫人却病逝了！这对公孙敖来讲是莫大的打击，自己的所有一切举动，就是自己一见钟情的这个女子，好不容易成了自己的夫人，结果却去世了！
公孙敖在莒国的日子还能过下去吗？如果说，以前公孙敖来莒国，那他在莒国具有相当的地位，因为公孙敖的身份可是鲁国执政上卿。那现在呢？已经被鲁国赶出国、被孟氏家族赶出家了，在莒国可谓是不值一提。
唯一可以依靠的，是夫人莒女所在的家族，一介莒国公族大夫。如今，唯一联系这个公族大夫家族的莒女也死了，公孙敖又是臭名昭著的一个，那本就不大的莒国，还能容得下他吗？
莒国人越来越不待见公孙敖，公孙敖无法在莒国生活了，天下之大，他能够去哪里？没有了国、没有了家，走到外面，分分钟都有被强盗或者蛮夷部族给灭了的可能。
哦，对了，那就去齐国吧。齐国离鲁国更近一些，到时在齐国混不下去，就想办法回鲁国来。就这样，公孙敖辗转流亡去了齐国。
仲孙谷听说父亲居然又流亡去了齐国，又气又急又心疼自己的老父亲，这几年他的生活，简直就是抑郁无比的生活，精神状态极差，居然一病不起！
躺在病榻上，仲孙谷对弟弟仲孙难道：“兄弟，哥哥这身子骨，看来是不行了，哥哥已经上书主公，要求主公同意由你担任宗主。这个家族，就交给你了。蔑儿年幼，就托兄弟你好生照顾了。哥哥此生，别无他求，唯求兄弟无论如何，都要将父亲给接回鲁国。父亲行事乖张，但终究是父亲，兄弟无论如何都要善待他。”
仲孙难流着泪，一边答应着，一边安慰着。但安慰没什么用，不久，仲孙谷去世。孟氏家族就由仲孙难继任宗主，鲁文公也任命仲孙难为卿。
在齐国的公孙敖听说自己的儿子去世了，急了，不管如何，自己得回鲁国啊。此时的公孙敖在齐国也确实混不下去了，因为钱没了。虽然自己与莒女生的两个儿子都扔在莒国，自己也就一个人生活，但谁想齐国国君齐侯贪得无厌，隔三差五就来索贿，自己又不敢不给，很快自己就成了穷光蛋了。