听说大唐岭南五府经略使何履光带兵来交州，距此不过两三日的路程，段俭魏和冯若芳同时变色，他们一个是南诏人，与大唐还是敌对关系，一个是海盗大首领，官匪不同路。无论他们到交州是何目的，都不能与何履光相见。
段俭魏叉手道：“大首领，我与大唐官员不便相见，无论你信与不信，我都要退兵了。”
冯若芳也道：“我也不管你的真假，何履光虽是老夫同乡，却也不便相见，既然唐军来了，也就没我们海盗什么事咯，老夫要要回崖州去了。”
语毕二人相视大笑，也不知是笑误会了对方，还是笑自己多事。
岭南节度使何履光是南海崖州朱崖郡人，世之名臣，天宝八年曾率十道兵平定南诏，取安宁城，复立东汉马援铜柱乃还，时人称之“有谋赞之能，明恤之量”，他率军前来，则安南无忧矣，段俭魏和冯若芳确实没有在留在交州城的必要了。
段俭魏叉手向冯若芳道别，带着骑队转头要走，冯若芳道：“且慢！”
段俭魏奇道：“大首领还有何吩咐？”
冯若芳拿手一指拉纤的数百大食人道：“这些俘虏我是不要的了，送给何履光做见面礼吧。”
段俭魏笑道：“何大将军进城见了这么多俘虏可要大吃一惊咯。”
大食人早被海盗们困成了一串串螃蟹似的，南诏骑兵每人一串压着他们回交州城，倒也轻松的很，冯若芳又命将船上闹文、计都、罗睺等人一并交给段俭魏带走。
江朔却向冯若芳求情道：“这计都、罗睺弟兄乃慷慨丈夫，还请大首领饶他们一命，冯若芳点头道：“溯之求情，老夫无有不允，只是不许回去找安禄山！”
立刻命人放了二人，对二人道：“你们自己逃命去吧，被何履光追上我可不管。”
没想到计都非但不走，反而跪倒求情道：“我等为仆，闹文为主，哪有仆得活命，主家受苦的道理？若放我二人，还请一并放了闹文将军。”
江朔不禁感到为难，他料想冯若芳一定不肯，没想到冯若芳不以为意，笑道：“大食舰队已被全歼，留着一个草包庸才也兴不起什么风浪。”他转头对闹文道：“闹文，老夫能放你第一次，就能放你第二次，你随着你家的忠仆走吧。”
闹文不通汉话，计都给他传译了，闹文也不禁大喜，双手抚胸，深深一躬，对冯若芳行了个大食胡礼，计都、罗睺则是学的唐人跪倒磕头，二人手受了伤，跪倒立起之际手臂不能动十分滑稽，却无人发笑。
冯若芳命人给三个大食人一条小船，计都、罗睺都无法划桨，养尊处优的闹文这次却一言不发自己划起桨来，小船飘飘遥遥向下游歪斜而去。
这闹文乃是本次交州之乱的元凶巨恶，若被唐军擒住决计不可能放他活命，冯若芳却不加商量，说放就放，也只有大海盗才做得出这样的事。
段俭魏没有认出船上的江朔，再次告辞之后，便押着剩下的大食俘虏回交州城去了，他自也不会带着这些人回南诏，而是将这些人关在城中监狱里，自己留下一封书信引军回南诏去了，何履光到后果然大吃一惊，这是后话了。
送走了南诏人和大食人，冯若芳下令原地下锚，宴乐一番，等到晚上潮起时再趁潮信回归大海。
见冯若芳准备原路返回海上，晁衡、藤原清河二人便向冯若芳告辞，他们要北上回长安去，许远和陈先登也提出要走，他们本身是大唐官员，出于无奈才和海盗同行，不可能长期为伍。
江朔见众人都要走，也向冯若芳辞行。
冯若芳揽着他的胳膊道：“溯之，你多次救我，我怎能放你就走？怎么也得随我回崖州盘桓几日。”
江朔道：“许大哥和陈郎将准备留在交州城等何履光得军队，晁卿和藤原大使两人不会武功，任他二人自己穿越大山回中原去，我实在不放心，朔左右无事，准备陪二位同归长安。”
晁衡和藤原清河原本想到要走四千里北上，这其中绝大多数还是山路，不禁心中惴惴，如今听江朔说愿意和他们结伴同行，不由得大喜，冯若芳见不能再阻拦，只能同意，要厚赠江朔钱帛，江朔也以路途遥远不便携带为由拒绝了。
陈先登见满盘的珠玉金银端出来又捧回去，不禁深感惋惜，口里啧啧叹息不已。众人当即要走，冯若芳却坚决不肯了，酒席布置停当，非要款待他们吃喝后。
南海海盗的首领都受邀来到冯若芳的海鳅船上来，众海盗此次为国杀敌，虽然不可能获得朝廷嘉奖，却都一个个自觉扬眉吐气，宴席的气氛十分欢乐。
待开席时，众人这才知道冯若芳的船上真的什么都有，酒有肉还不算稀奇，居然鼓吹伎乐、歌姬舞女也应俱全，众人初还拘谨，后来便松弛下来，最后藤原清河、陈先登、冯若芳居然都在席间起舞，好不热闹，尤其是藤原清河醉后跳起东瀛日本国的鲇之舞，以手遮面，举手抬足之间，看来憨傻笨拙，却自有一番韵味，引得众人哈哈大笑，纷纷为他几节叫好。
如此闹腾了一晚，第二日南海海盗必须离开了，再晚何履光可就要到了，众人这才依依惜别，江朔等一行人下船踏上了交州的土地。
一行两百多人分作四艘船驶出黄泗浦港，在东海撞上海盗和唐军团结兵，后遇飓风，与船队失散，漂流至南安，此刻登岸的不过几十人而已。
众人沿河行了几里地，到了交州城，发现南诏人昨日就连夜开拔了，江朔不想和段俭魏相见，心想这样错开形成也不错，陈先登、许远和幸存的团结兵连同那两个侥幸未被杀的翁山海盗留在交州城内，明州团结兵十存其一，这两个海盗本也是明州人，要冒充团结兵可说时毫不费力。
他二人准备等何履光来后，随他回广州，再翻越大庾岭，一个回江南继续做他郎将，一个去睢阳赴任。
晁衡和藤原清河及几名东瀛船工则向北穿越所谓“十万大山”，进入岭南道，再走蜀道回长安，这条路就算顺利，也要三四个月才能走完。
然而，他们沿着红河而上，才进入哀牢山，藤原清河就病倒了，一则东瀛人不服南方水土，二则此前颠簸劳顿伤了藤原清河的元气，终于病倒了。
众人无法再行，这虽非绝症，却只能等藤原清河自己慢慢固本培元，自己恢复。如此在哀牢山中结庐居住了四个月，藤原清河康复后，众人才重新上路，他们翻过哀牢山，实已进入南诏国境内了。
说也奇怪，此时已是五月孟夏，却丝毫不觉暑热，不似安南一月的天气就已经很燥热了，众人行了数日，来到一方小城，问了当地通汉语的店家才知道叫“通海城”，盖因红河、盘江等数条通海大水均从此地流过，经大河可抵大海，故名通海城。
当地人告诉他们再向北行，就是五百里昆池大泽，循池南上就是会川，出会川便是巂州越巂郡，就是大唐剑南道的门户了。
一行人用鞋底泥将自己的脸孔涂黑，冒充安南来的难民，然而一众东瀛人生的矮短尚可说有几分像安南人，江朔生的长生玉立，气宇轩昂，南诏人一望而知是唐人。
众人寻一处邸店，江朔立刻被店主认出是唐人。
奇怪的是，虽然此刻两国应是敌国，店家作为南诏人却并不仇恨唐人，反而招待得颇为殷勤，如此一行人见状也就不再遮掩，托店家帮忙买了几套当地人的土布衣衫，大大方方地洗干净头脸，以真面目示人了。
南诏丛林密布，林中多有蛇蚁毒虫，故而夜间不敢在野外露宿，今日就准备住在这个邸店不再赶路了，其时天色尚明，众人便买了几坛当地人酿的土酒，有要了几个菜，在店中吃喝起来。
这邸店看来是给贫苦人住的脚店，店内别无装饰，只有一个大通铺，所有客人都是席地而卧，就连榻也没有一张。此时店内墙角还躺了一人，那人背对着他们，许是嗅到酒肉的香气，那人道：“哎……晦气，晦气，怎么遇到这么一帮子人。”
晁衡不解问道：“世兄何出此言？不知我们何时得罪了世兄？”
那人却不回答，继续道：“你们自己快活，却把我一人晾在这里。”
东瀛人多懂得汉话，立刻有几个年轻气盛的汉子一拍桌子战了起来。晁衡和藤原清河修养却极好，并不动怒，晁衡伸手向下按了按，止住众人，自己朗声道：“世兄既如此说，请来一坐，与我等一起吃喝便了。”
那人面壁而卧，并不回应晁衡的话，口中却还在唉声叹气不已，众人见状颇以为异，晁衡起身走到他面前，一拍那人肩头道：“世兄，别生闷气啦……”
那人悚然一惊，跃将起来，喝问道：“你们是何人？我怎的不认得。”