幸福的時間是短暫的，段飛必須在靈雨的遮掩下才能與蘇蓉私會，次數稍稍密集一點，岑萱便有所懷疑，還以爲靈雨把段飛藏起來做什麼去了，於是跟靈雨的關係再次僵硬下來，爲了避開岑萱，段飛索性藉口廣西改土歸流的政策已經順利推廣，欽差大人要去廣東巡撫了。
段飛留着楊慎在廣西繼續宣傳民族政策，自己帶着欽差儀仗沿着桂江順流而下，岑萱一直跟到了梧州，終於被岑璋派來守護她的人攔住，沒有繼續跟段飛到廣州去。
段飛前往廣州也並不全是爲了避開岑萱，事實上他是在廣西這個與外界幾乎隔絕的地方呆得太久了，他想到海邊喘口氣，到一個接近大海的地方，瞭解一下，他的海軍發展得怎麼樣了，天堂島那邊情況如何，滿刺加的佛郎機人有沒有異動等等等等。
相對於封閉的廣西，廣東的經濟與社會發展明顯優於廣西，尤其是首府廣州府，一直都是大明對外開放的市舶司之一，如今寧波、泉州改革開放搞得如火如荼，廣州雖然沒有欽差大人支持，但是他們的商業一樣搞得很活躍，段飛來到廣州後幾乎忘記了自己的初衷，一頭扎去跟商人們會面，探討如何讓廣州的經濟更上一層樓去了。
相對於廣西來說，廣東的民族較少，地形也沒廣西複雜，經濟情況更是超出何止一截兩截，百姓接觸外界較多，因此思想也比較開放，改土歸流的政策實施起來也順利許多，不過主持改土歸流的工作依舊是一件繁雜且得罪人的事，段飛依舊遇到了強大的阻力，不過他是五省欽差，手握正德給予的生殺大權，加上施政得宜，各族百姓在強大的宣傳攻勢下，對新政還是很支持的，那些利益受損的土司就算奮起反抗也沒有什麼用處，肯跟隨他們造反的人是越來越少了。
土改進行得順利，段飛的心情也漸漸舒暢起來，在廣州一呆就是幾個月，正德十七年的夏天非常炎熱，段飛忙裡偷閒溜去見自己的妻兒，如今的段煜已滿了三歲，正是最可愛的時候，活力十足地滿院子亂跑，到處亂爬，段飛心疼地給他剝荔枝兒，剝得一顆就把他叫到面前喂到他嘴邊。
“夫君，你這樣會慣壞煜兒的。”蘇蓉臉上洋溢着幸福，嘴裡卻在責備着。
段飛笑道：“煜兒這麼乖，又有個這麼好的娘教着，怎麼會被慣壞呢？來……煜兒，過來吃荔枝。”
段煜正在努力爬樹，可惜倆腿太短，夾不住樹幹，不停地滑下來，他依舊毫不氣餒地用力爬着，聽到段飛的話，他回過小臉兒，說道：“爹，我吃飽了，你剝了給娘吃吧。”
段飛虎着臉道：“都給你們吃了，爹爹就不用吃了嗎？”
段煜認真地說道：“那就給娘吃五顆，爹爹再吃一顆好了。”
段飛訝道：“爲啥給你娘吃五顆爹爹才能吃一顆啊？”
段煜道：“因爲總是娘陪我玩，爹爹隔幾天纔回來一次，所以娘吃五顆爹爹才能吃一顆。”
段飛苦笑到：“原來如此……你說得對，夫人，你辛苦了……”
蘇蓉把段煜抱了回來，把他身上的泥土拍了幾拍，說道：“煜兒啊，你爹爹不是不想陪你，你爹爹有許多的事要做，娘在家只照顧你一個人，你爹在外頭要照顧千千萬萬的人，若沒有你爹，只怕你連荔枝都沒得吃哩。”
段煜睜大了眼睛，說道：“爹爹，我在外邊是不是還有很多弟弟妹妹呀？千千萬萬到底是多少呀？”
段飛和蘇蓉都被段煜的童言逗樂了，段飛正要解釋，大門突然咚咚咚地被敲響，段飛心中一怔，喝道：“是誰？”
門外靈雨的聲音說道：“姐夫，是我，家裡頭出了點事，大家都在找你，你快回家看看吧。”
段飛趕回杭州府衙的時候已經明白了事情大概，原來是瓊州府出事了，一夥佛郎機海盜強闖瓊州（今海南島），佔領了瓊州島西部的昌化港，他們來勢洶洶，瓊州府巡檢司的船被打沉了兩艘，死了五個巡檢，傷了七八個，廣州府派出船隻使節與其交涉，又被那些佛郎機人打沉了船，派去使節與隨從許多都被淹死在海里，廣東方面着急了，於是才趕往欽差行轅向段飛求援。
段飛來到廣州府衙的時候，廣東布政使公冶環毅等官員正已經是焦頭爛額，見五省大欽差到了，他們這才鬆了口氣，急忙圍上去迎接。
“如今情況如何？有最新情報嗎？”段飛劈頭問道。
廣東總兵餘旗道：“大人，那些佛郎機人佔領了昌化港之後便沒了動靜，只不過海上船來船往，似乎卸下許多東西，據下官分析，他們可能打算固守昌化港，以爲前哨基地，待站穩了腳跟再圖謀全島。”
段飛頷首道：“看來確有此可能，公治大人，餘總兵，如今廣東還有多少能出海一戰的船？配有何種火炮？熟練水戰的水師官兵總數有多少？”
餘旗和公治環毅面面相覷，餘旗一咬牙，對段飛說道：“大人，自海禁以來廣東就撤了水師建制，僅餘的船都是百餘年前造的，那些炮鏽的鏽，壞的壞，哪裡還能用啊，也就剩下些沿海巡檢司的巡檢小船，哪能耐得起炮轟，熟練的水師根本無從提起啊。”
段飛明知如此，卻故意發怒道：“廣東乃我大明扼守南海之要衝，怎能將水師荒廢至此地步！既然整個廣東都無兵可派，無舟可用，你們還叫本官過來作甚？等着佛郎機人殺來廣州，你們集體向佛郎機人投降算了！”
欽差大人發怒了，所有人都不敢出聲，公治環毅硬着頭皮解釋說那是朝廷的命令，他們也是不得已啊，段飛順勢道：“如今朝中情況已截然不同，你們既然認同海軍重要，爲何不上書懇請皇上答應在廣東重建水師呢？”
公治環毅道：“大人，廣州到京城路途遙遠，就算我等立刻上書懇請皇上降旨，一來一回最快也需一個月時間，海軍建立更是需要時日，等咱們海軍建成，只怕瓊州島已經被佛郎機人佔去了，段大人，月港據廣州不遠，聽說大人組建的東海艦隊有一支正在月港駐紮，不如大人傳令調東海艦隊到昌化港，將那些佛郎機人驅逐回滿刺加如何？”