早想找个茬将伍姨娘给远远地卖了，省得抢来的儿子养不住。伍姨娘则是委曲求全挨打受气的过日子，哀求大夫人怜悯。
牛牛两岁的时候，矛盾爆发，伍姨娘挨了顿打被卖了。牛牛闹绝食，方畅就又派人追着人贩子把人买回来了，可是回家之后的伍姨娘神志就不清楚了，不认得牛牛。牛牛也因为害怕犯病的伍姨娘而不再闹着要人，方畅顾念着伍姨娘也是因为方府受了这份罪，就把她送到祖屋养病，时间一长心思也就淡漠了，同年大夫人和新姨娘同时怀孕，转年同日各生一个儿子，而这年伍姨娘的疯病更重了，仆人也开始怠慢，很快就变得骨瘦如柴长满疥疮。
有了两个弟弟，牛牛就成了大夫人和新姨娘的眼中钉，长子在遗产分割上有很大的优势，而且牛牛还是认在大夫人名下的嫡长子。各种陷害在老谋深算的女人和懵懂无知的幼童间展开，很快牛牛就失去了祖父母和父亲的疼爱，成了府里一个尴尬的存在。
安顿下来的刘叔一家人天天都可以闻到后院飘来的药香气，刘兰珠曾在方府厨房帮工，闻出来有人参、当归的味道，其他的就闻不出来，一日饭后就和爹娘哥哥们念叨，刘叔再三强调后院的事情不许过问不许外传，最后总结语是大少爷是有大造化的人，要绝对恭敬着