大郎君安排好二少郎君的后事，心情还未调整过来，一个月后又传来孟神医和妻主云游归家遇塌方事故双双离世的消息。这个消息对大郎君来说无疑是雪上加霜，大郎君奔赴娘家料理父母的后事，一月方归。归家后，顾孟萦奶奶本就卧病，又遇到二少郎君殁了，孟神医又故去，遂一病不起，又缠绵病榻两个月后也撒手人寰。顾孟萦奶奶和她的大郎君伉俪情深，一生相亲相爱，感情甚笃。妻主一离世，他也受不住，趁人不备喝药下去陪妻主了。这不到半年的时间，大郎君先后失去了儿子、父母和公婆，简直是乌云盖顶。那段时间大郎君痛不欲生，几乎丧失了对生活的希望。可没想到二郎君私下派人在外面谣传说大郎君命不好，刑克亲人，是孤煞命。这无疑是雪上加霜，幸好神药谷大药师黄怜顾和孟神医是旧年故交，和大郎君也算是忘年交。得知大郎君的事情，就派自己的心腹常随来邀请大郎君去神药谷共同探讨制药。大郎君安排孟南、孟北照顾好陪嫁的产业和庄子，将顾家的产业和庄子交还给顾玉儿之后，带着附子和川芎去了神药谷。在神药谷一呆就是三年。正好守过了几位长辈的孝期。这三年里有黄怜顾的陪伴和照顾，大郎君心中的烦闷开解了许多。他想离开顾玉儿，但黄怜顾劝他回去，哄好妻主给他生个孩子再说和离之事，没有孩子，大郎君和离之后并不能单独立户，只能回到娘家，在庶妹手底下生活，直到再嫁人。如果幸运有了女儿，女儿满六岁，征得妻主同意，就可和离带走女儿单独开户；即使生了儿子，儿子满六岁，给官府交一大笔钱也可立独户，总之必须要有子嗣才能和离。所以三年后大郎君收拾好心情，带着连翘和宛童回到了顾家，原来带去的附子和川芎已经嫁到神药谷了。
后大曌王朝由于女子稀少，所以不允许女子守孝，一般父母故去守孝百天即要出孝期，如有孕不守孝也可，外人不得以此批驳，这是为了生育计量的。如果循古礼，守孝三年，左三年右三年，加上外亲孝，那岂不是要错过了生育期。所以顾玉儿父母故去百天后，出了孝期她就迎娶了五郎君。
五郎君是顾孟萦奶奶从青楼买回的清倌儿，本是为了分二郎君的宠而买回来的侍奴。五郎君样貌秀美文弱，自带风流。他刚被带回顾家时，并不是作为顾玉儿的侍夫，而是作为主院的侍奴。五郎君在风月场上历练多年，琴棋书画也算精通，眼界和心机自不必说，为了改变自己为奴的命运，更是使出了浑身解数，将顾玉儿迷的神魂颠倒，玩得好一手欲擒故纵，让顾玉儿求而不得，却又割舍不下。为此二郎君气个仰倒，却又不敢冒头。当时顾玉儿的母亲虽卧病，但依然够让二郎君胆寒。他没少撺掇三郎君和四郎君出头收拾当时还是侍奴的五郎君。五郎君到底是从楼里出来的，技高一筹，哄的顾玉儿一满孝期就纳他入顾家，又哄得顾玉儿为他生下六少郎君，顺利从侍奴提为侍夫。
大郎君去神药谷之前将顾家的产业交还给顾玉儿打理，由于顾玉儿并不喜庶务，就交给了李多福来打理。二郎君虽通读四书五经，却不太通庶务，加上他又想继续科考，在顾家的产业经营上分配精力不足。三郎君和五郎君虽擅经营，可二郎君又舍不得到手的权利和利益，不肯放手。所以这三年里，顾家的产业停滞不前，收益大不如从前。为此，顾玉儿很不高兴，冷落了二郎君一段时间。正好此时大郎君从神药谷回来了，顾玉儿想起了大郎君的清润儒雅和温柔俊逸，还想让大郎君继续帮着经营顾家的产业，而大郎君也想要顾玉儿给他生个孩子，两人各有所求，倒也配合甚好。顾玉儿从二郎君手中收回了顾家的产业，仍旧交给大郎君打理，二郎君为此很生气伤心，却又无可奈何。那段时间，大郎君努力经营顾家的产业，收益大幅上升，顾玉儿很满意，心情也好，顺利怀上了身孕后，整个孕期大郎君将她照顾的无微不至，经常送她各种珠宝首饰，让顾玉儿开心不已。大郎君怕有人对胎儿不利，请郎中对外宣称顾玉儿怀了个小郎君，又派人对顾玉儿仔细照看，终于在第二年春夏之交顾玉儿顺利生下了顾家嫡女顾孟萦。
顾孟萦出生后，二郎君简直懵了，他没想到和顾玉儿赌了场气，一回神竟然就让她生下了嫡女。他只是没想到生下的是女郎而不是郎君，一是女儿本身就难得，不会轻易就生出女儿来。二是，给别的夫郎生了女儿也没关系，毕竟都是庶女，不会影响顾丽萱作为长女继承顾家。但大郎君是正夫，如果是大郎君的女儿，那么他女儿的地位就直线下降了。在有嫡女的情况下，顾丽萱想要继承顾家那就难了。
顾孟萦一生下来，就被大郎君严密保护起来，二少郎君的例子在前，他不敢有丝毫懈怠。二郎君想要找事却找不到突破口，又来缠顾玉儿，毕竟是幼时青梅竹马的情分，两人很快就和好了。
被大郎君捧在手心的顾孟萦一天天长大，也安慰了大郎君那颗伤痕累累的心。直到顾孟萦三岁左右，神药谷的大药师黄怜顾写信来邀请大郎君去帮忙研制一种新药。大郎君想着黄药师对他的恩情和照顾，实在不好拒绝，但是将顾孟萦带着也不合适，毕竟长途跋涉，对一个三岁的小孩子来说实在太辛苦。只好将用了好几年的连翘和宛童留下，连同梅兰竹菊四个贴身小侍奴一起照顾顾孟萦。就千里迢迢奔赴神药谷，在那里日夜不停地讨论药理和毒理，做实验研发新药。本来大郎君计划在那里呆上一个月，加上来回路上的时间两个多月也够了，没想到药效研究碰到瓶颈，又多耽误了一个月。三个多月之后大郎君才风尘仆仆地从神药谷赶回顾家。
他没想到他才出门不到一百天，顾孟萦就被人算计，用蛇去吓一个三岁多的孩童，彻底让她胆寒，畏缩不语。至于背后的黑手是谁，大郎君心知肚明。之前大郎君不知道顾孟萦畏缩不语的原因，加上有人推波助澜，重提大郎君命格不好的流言，说他克父克母克子嗣，儿子让他克死了，女儿又让他克成了哑巴。大郎君为此愧疚不已，要不是还得照顾幼小的女儿，他几乎都要遁入空门。为此，他有空经常带顾孟萦去清源寺上香，给丰厚的香油钱请大师为自己的小女儿祈福。慧定大师看大郎君虔诚，知他心里的苦。方言语点化他说他女儿是个福泽深厚之人，只是时机未到，时机到了，他女儿自然有如神助，聪慧绝伦。大郎君相信慧定大师不是打诳语之人，才稍稍心安。他温柔地等待着他女儿成长，希望她能展现那聪慧绝伦的一面。
顾孟萦出生后，顾玉儿最不耐烦照看小孩子，将她丢给大郎君，又去寻找她的真爱了。后来看顾孟萦畏缩不语，二郎君又吹枕边风说，大郎君命不好，克子嗣，生的女儿是个痴哑，还不知道克不克妻主，让妻主小心为上。说一遍没有人信，说的多了难免让人将信将疑，最后都不得不怀疑大郎君是不是真的命不好。加上顾孟萦小时候并不亲近顾玉儿，又看着畏畏缩缩，实在让人喜欢不上来。大郎君第二次从神药谷归来后，看到顾孟萦变得畏缩不语，他狠狠责罚了连翘和宛童，并将他们打发出了顾府。连翘和宛童被二郎君撺掇，给他们制造机会爬上了顾玉儿的床，她正在兴头上，尚未觉得腻烦，他们就被大郎君发卖了。二郎君又在她耳边说大郎君命不好还善妒，德行有亏。她被拱出火，大吵大闹，和大郎君再一次决裂了。
顾丽萱及笄时，为了让她能找到家世更好的夫君和夫郎，顾玉儿又重提让大郎君将顾丽萱记在名下的话。大郎君当然还是毫不客气地拒绝了。他说就算我女儿是个哑巴，我也不会嫌弃她，更何况她只是身体有恙，她总会好的。我以前不需要记名的女儿，以后也不需要。
顾玉儿虽疼爱顾丽萱，但大郎君不同意，她也不能直接将顾丽萱记为嫡女。
为防止有人故伎重演残害顾孟萦，大郎君安排四个侍奴日夜不离地照顾她，只有千日做贼，哪有千日防贼的。老虎还有打盹的时候呢。冬至那天奇冷，因为顾玉儿要求大家一起包饺子并一起用餐，大郎君要安排厨房事宜，稍没留神，就被人钻了空子。冬至午后顾孟萦落水昏迷，大郎君吓的几乎灵魂出窍。抱着顾孟萦不眠不休，让孟北拿着他的拜帖去清源寺请慧定大师帮顾孟萦招魂。大郎君衣不解带地照顾顾孟萦，直到她醒来。那时他心下已决定离开顾家，为了保全顾孟萦，再多的非议也无所谓，不管付出什么代价他都要带走他的女儿。
新年夜话到很晚，子时一到，外面鞭炮陆续响起，顾孟萦能熬到那个时候全归功于长长的午休，子时一过顾孟萦就熬不住了，在大郎君怀里睡了过去。