話說呂、張二人乘船到了漢陽，上岸會了兩個朋友，便往各地閑遊。名山勝水，到處勾留，高人異士逐地結納，不覺過了年餘。這日行至湖廣地麵，聞聽人言，川中當道已然易人，流寇漸有西侵之勢。想起家中婦孺，連夜趕回原籍時，一路上見流寇土賊勢如蜂起。呂偉料出大勢已去，川中不久必遭大劫。再看中原大地，民亂日甚，大亂在即，便是天人也無法遏止。身不在位，故鄉仇家又多，除了離川往雲貴一帶暫避凶焰，更無良策。張鴻家中人口不多，隻有一子，年已十三，一招便來。商妥立即約地相會，分手自去。
呂偉抵家一看，病妻業已奄奄一息，正在垂危，待沒兩日，徑自身死。隻剩愛女靈姑依依膝下，悲泣不止。呂偉自不免痛哭一場。剛剛殮埋好了，準備上路，忽見張鴻同子張遠急匆匆跑來，說各地烽煙四起，驛路已斷，縱有本領，不畏賊侵，帶著賢侄女在賊盜叢中行走，終是有些不便。陳賢弟現在任上，聞得那裏倒頗安靜。自己因算他尚未起程，特地抄路迎來商量，舍了原約官路，抄川滇山徑野道同行。雖然食糧用具要多帶些，但較少操點心，路程還要近些。呂偉點頭稱善。張鴻見靈姑穿著重孝，含淚上前拜見，問起原由，自不免走至靈前哭奠一番。
呂偉因有許多戚友都須顧到，不忍獨顧自己父女避禍，已然分別通知。村人都是安土不願搬遷，禍不到麵前，大半不動。內中隻有一家姓玉名守常的，知道呂偉見識高遠，慮患知危；加以人口和呂家一樣不多，除本人外，隻有一妻一子，而且都會一點武功，同去並不累贅。原與呂偉約定，回家安置好了田園產業，收拾行李，張鴻到了第二日，準來結伴同行。呂偉便留張鴻住下。
第二天黃昏時分，王守常果然帶了妻子前來赴約。因聽風聲越緊，呂、張二人的行李早就收拾好的了，大家一見麵，隻待了大半晚，次日天還未亮，便即起程。呂偉素常謹慎，作事嚴密，故鄉戚友雖曾一一苦口相勸，並未說出自己行期。眾人因大幫的流寇相離本縣還有一兩千裏路途，官府已曾派兵堵載，以為動身決沒這般快，所以都未來送別。呂偉的產業，在回家的前幾天，推說近年在外虧空甚多，又要備辦妻子身後，早用廉價換了金銀現錢。一行之中，凡是婦孺都騎著一匹上好的川馬，兼帶隨身行囊。呂、張、王三人暫時步行。共是三家七口四匹馬，靜悄悄的，依仗著人熟和素日名望，叫開城門，抄著山徑野路，繞穿山人居住的區域，往雲南進發。