由于跟著莫奇父亲逃出的人大半属于他们家产业下的人，于是他父亲理所当然的负起了带领及照顾之责。他们一路往南走，但由于同时被大水淹没的村庄很多，逃出来的难民也多，所有的物质更加缺乏，即使有钱也买不到吃的。偶尔有官家放粮或大户人家赈灾，但毕竟粥少僧多，加上一种不知名的疾病在流行，只要感染上的人，都会忽冷忽热全身起红疹子，不出几日，患者就会死去。
他母亲为了照顾患者，又将分到的一点食物都给了他们兄妹，以致身体太虚弱，因此感染了重病，不出几天就去世了；接著他那才四岁的妹妹也跟著走了。在那次的天灾中，他的亲人及村民总共有二十多人死于途中。
他父亲带著他们继续南下，约莫过了一个月，当时跟著他们的人已经从百来人剩下约六十多人；