且说玉衡因有了儿子，万事俱足，遂飘然有世外之想，把“功名”二字真是置之度外。正是：有子万事足，无官一身轻。
海公无事，以儿为乐，或到名山胜境去游玩，也觉优游。
时光易过，又是几年。海瑞已经七岁，虽在孩提之中，性至孝友，更兼资质聪明，耿直无私。每与邻儿共游，饮食之物，必要公同分食。若有多取者，瑞必詈之。玉衡教他读书，过目辄能成诵。又过了三年，海瑞年已十岁。无书不读，诗词歌赋，靡有不通。是年玉衡一病身亡，海瑞哀痛欲绝，夫人亦痛哭不已。瑞痛父身亡，未能尽子道，意欲结庐于墓侧，少展孝思。
夫人劝阻曰：“你虽性至孝顺，但你年纪幼稚，郊外无靖，倘有不测，我何赖焉？此欲尽孝而反增不孝也。”瑞闻母谕遂止，在家守制。夫人便昼夜令他诵读，虽夏暑不辍。未几服满，瑞年已十三。或有劝瑞应童子试者，瑞对曰：“我年尚幼，经史未通，若出应试，必被人笑，徒费笔墨。不如闭门苦读，待我淹贯了，然后去也未为迟。”夫人闻瑞在外答友之言，私喜曰：“此儿不务矜浮，日后必有实学。”于是更加约束，母子二人，切磋严如师弟一般。
瑞性做好菊，不喜趋承。尝有《品菊》诗曰：绕篱一二费平章，五色迷离满径香。
晚节岂容分上下，蓬门毕竟育低昂。
范村谱订名多误，郦水空传种最良。
欲向澹中寻更澹，鬓丝愁落满头霜。
《伴菊》诗云：柴门重闻日悠悠，愿向闲花稳卧游。
俗骨不堪同入梦，芳心曾许独探幽。
性情淡处常相对，靖冷香中过此秋。
莫遣风仙借婢职，夜深墙角已低头。
夫人见其诗雅淡，知瑞他日晚节独坚，必为一代忠臣者，尝谓之曰：“你终日读书，不求闻达，究有何益哉？”瑞曰：“儿苦读书，非不欲进取。但念母亲年届喜惧，儿恐一旦成名，就要远离膝下，故此忍隐，不欲为母亲忧也。”夫人怒曰：“为人子者，不欲扬名显亲，岂欲我死后你方进取耶？马鬣虽封，铭旌七尺，我亦不得亲见也！”瑞闻母怒，跪而慰之，谢罪不迭，夫人怒始稍息。瑞从此益励诗书，以图进取。
次年学院按临，瑞便出应试，果掇芹香。夫人喜曰：“你得一衿，我死瞑目矣。”簪笑同庠诸友劝同赴省，以夺秋魁。
瑞每以母在家无人侍奉终日，不欲行。及至其母听了瑞答友之言，遂勉之曰：“你每以我在家，无人侍奉为辞，不欲相离左右。但功名大事，我尚强健，你可前去，不必挂念。”瑞见母如此吩咐，不敢有违，遂打点行李，会齐诸友，望着海康而去。
到了雷州，舍舟登岸赶路。一夜，月明风轻，瑞在旅店里睡不着，偶步园中。时已三更向后，店中诸客俱已熟睡。仰望星斗满天，万籁俱寂。忽闻有人说道：“昨夜前村张家祭鬼，我们正好前去寻些饮食，偏偏又碰着这位海少保在此。土地爷好没来由，却要派我们在此伺候，他老人家便安然坐着，好不教人忿气呢！”一人道：“你莫怨他，他乃是一方之主，你我都是受他管的，怎么不听使令？这是应该的，不必多说。恐怕这老儿听见了，又要责罚呢。”一人道：“怕什么？此老太不公道，但是有得奉承他的，便由人去横行滋扰；若是我等穷鬼，他便专以此劳苦的事来派着呢！”一人道：“你且说他怎的不公平呢？”那人道：“即此张家一事，就可见其不公矣。张家的女儿，昨因上墓拜扫，遇了这个王小三，在路上撞见了。欺她孤儿寡妇，随就跟了回去，作起祟来。她家好不惊慌，不知被他弄了饮食。那日，张寡妇到此老儿处祷告，求他驱除。这老儿初时甚怒，立刻拘了王小三到庙，说什么要打、要罚他。后来王小三慌了，即忙应许了些金帛。这老儿便喜欢到极处，不但不责罚他，反助纣为虐，任他肆扰呢！”一人道：“怪不得张家今夜大设饮食，他便安安稳稳的前去受领，却遣我们在此伺候这海少保呢。”一人道：“怪不得你说他。”海瑞听得明白，才知是鬼在此议论，暗喜自己有了少保的身份，不觉咳嗽一声，倏而寂然，海瑞亦回房中安息，自思土地亦受鬼贿，心中大怒。
至天明起来，梳洗了，诸友便要起程。海瑞道：“且慢着。
今日有一奇事，待我弄来你们看看。”诸友不解其故，快问道：“荒郊野店，有什么奇事？不如莫管闲事，赶路要紧呢！”海瑞道：“列位有所不知。这里有一张家，她是个寡妇，有一女儿，被野鬼王小三作祟，大索祭祀。本坊土地反与鬼通同扰搅，你道奇么？”诸友问道：“你怎的知道？”海瑞便将夜闻鬼言备细告知，但不说鬼称自己是少保。诸友听了，各各惊异。况且都是少年，未免好事，各人都怂恿海瑞，要看他怎么处置那土地。海瑞便向店主人问明，哪里是土地庙并张家的住址。用了早饭，便望着那土地庙而来。正是：正气能驱魅，无私可服神。