当他想弄清楚二郎死亡真相时，却发现顾玉儿已经将当时看护他们的侍奴全部杖毙，他能得到的消息就是大娘子和大少郎君说的二少郎君淘气，非要到池塘的冰面上去玩耍，哥哥和姐姐拉都拉不住，导致大娘子和二少郎君踏破冰面落入水中，大少郎君赶忙喊救人，他们被救上来时大娘子还好，二少郎君已经没有呼吸了。
大郎君安排好二少郎君的后事，心情还未调整过来，一个月后又传来孟神医和妻主云游归家遇塌方事故双双离世的消息。这个消息对大郎君来说无疑是雪上加霜，大郎君奔赴娘家料理父母的后事，一月方归。归家后，顾孟萦奶奶本就卧病，又遇到二少郎君殁了，孟神医又故去，遂一病不起，又缠绵病榻两个月后也撒手人寰。顾孟萦奶奶和她的大郎君伉俪情深，一生相亲相爱，感情甚笃。妻主一离世，他也受不住，趁人不备喝药下去陪妻主了。这不到半年的时间，大郎君先后失去了儿子、父母和公婆，简直是乌云盖顶。那段时间大郎君痛不欲生，几乎丧失了对生活的希望。可没想到二郎君私下派人在外面谣传说大郎君命不好，刑克亲人，是孤煞命。这无疑是雪上加霜，幸好神药谷大药师黄怜顾和孟神医是旧年故交，和大郎君也算是忘年交。得知大郎君的事情，就派自己的心腹常随来邀请大郎君去神药谷共同探讨制药。大郎君安排孟南、孟北照顾好陪嫁的产业和庄子，将顾家的产业和庄子交还给顾玉儿之后，带着附子和川芎去了神药谷。在神药谷一呆就是三年。正好守过了几位长辈的孝期。这三年里有黄怜顾的陪伴和照顾，大郎君心中的烦闷开解了许多。他想离开顾玉儿，但黄怜顾劝他回去，哄好妻主给他生个孩子再说和离之事，没有孩子，大郎君和离之后并不能单独立户，只能回到娘家，在庶妹手底下生活，直到再嫁人。如果幸运有了女儿，女儿满六岁，征得妻主同意，就可和离带走女儿单独开户；即使生了儿子，儿子满六岁，给官府交一大笔钱也可立独户，总之必须要有子嗣才能和离。所以三年后大郎君收拾好心情，带着连翘和宛童回到了顾家，原来带去的附子和川芎已经嫁到神药谷了。
后大曌王朝由于女子稀少，所以不允许女子守孝，一般父母故去守孝百天即要出孝期，如有孕不守孝也可，外人不得以此批驳，这是为了生育计量的。如果循古礼，守孝三年，左三年右三年，加上外亲孝，那岂不是要错过了生育期。所以顾玉儿父母故去百天后，出了孝期她就迎娶了五郎君。
五郎君是顾孟萦奶奶从青楼买回的清倌儿，本是为了分二郎君的宠而买回来的侍奴。五郎君样貌秀美文弱，自带风流。他刚被带回顾家时，并不是作为顾玉儿的侍夫，而是作为主院的侍奴。五郎君在风月场上历练多年，琴棋书画也算精通，眼界和心机自不必说，为了改变自己为奴的命运，更是使出了浑身解数，将顾玉儿迷的神魂颠倒，玩得好一手欲擒故纵，让顾玉儿求而不得，却又割舍不下。为此二郎君气个仰倒，却又不敢冒头。当时顾玉儿的母亲虽卧病，但依然够让二郎君胆寒。他没少撺掇三郎君和四郎君出头收拾当时还是侍奴的五郎君。五郎君到底是从楼里出来的，技高一筹，哄的顾玉儿一满孝期就纳他入顾家，又哄得顾玉儿为他生下六少郎君，顺利从侍奴提为侍夫。
大郎君去神药谷之前将顾家的产业交还给顾玉儿打理，由于顾玉儿并不喜庶务，就交给了李多福来打理。二郎君虽通读四书五经，却不太通庶务，加上他又想继续科考，在顾家的产业经营上分配精力不足。三郎君和五郎君虽擅经营，可二郎君又舍不得到手的权利和利益，不肯放手。所以这三年里，顾家的产业停滞不前，收益大不如从前。为此，顾玉儿很不高兴，冷落了二郎君一段时间。正好此时大郎君从神药谷回来了，顾玉儿想起了大郎君的清润儒雅和温柔俊逸，还想让大郎君继续帮着经营顾家的产业，而大郎君也想要顾玉儿给他