氏更因这么多年都没能生下一儿半女，受到的辱骂便更多了。
许三为了维护她，也不管自己会背上不孝的骂名，便与爹娘对骂、与嫡兄动手，到最后成了人人唾骂的不孝子孙，险些没把他逐出许家。而他自己也变得自私自利、惟利是图。
许仁昶则因受够了这样的日子便在朝廷募兵时，跑去从军了。其妻因生下的是女儿，便承担了不亚于许王氏的压力，后来更因生病，而许家不愿意多花费钱财救治，不久便病逝了，留下嗷嗷待哺的许相如。
许王氏见许相如可怜，而自己迟迟生不出孩子，便与许三商量将她抱回来养了。许三也没动休妻的念头，最终同意抚养许相如。
后来淮南路发生了干旱，四处闹饥荒，到处都是饥民，而许三的嫡兄更是紧紧地看着钱粮不让他们接触。迫于无奈，许三唯有带着许王氏和许相如到别处逃难。
几经磨难，辗转之下来到了瞿川，得到了富户的接济和官府的安排，他们才在浮丘村落脚，这一待便是十几年。
期间他们也不是没动过回去的念头，可想到曾经遭受的搓磨，以及家人那副恶毒的嘴脸，他们便打消了回去的念头。
人会变，可许王氏却始终记着当年许三为她付出的心情，所以哪怕许三后来找私窠子，