曾经年幼无知的许相如也问过许王氏为何非得惯着许三，而那时的许王氏则陷入了回忆之中，感慨道：“其实他对我很好的……”

许王氏和许三都是淮南路濠州长乐人，那时候的许家是村里略有地位的地主，许三的爹轮充为州府衙门的押司。

押司和衙前、散从官一样，都是差役的一种，而他们负责管理、经营、运送官物，所产生的费用都是得自己负责。若是在运送过程中发生意外，使得官物有所损失，他们往往要承担这些损失。

由于运送的距离很远，费用又高，还常常被官员们剥削，以至于往往得赔钱，乃至破产的也大有人在。

许三和许相如的亲父许仁昶都是庶出的，他们自幼便不受许家的待见，但是许三较为安静，被欺负了也常常不做声。

许王氏嫁给许三时，许家已经没落，日子过得跟四五等户也没差别。而许家的嫡子和正妻便使劲地搓磨许仁昶、许三，连他们的妻子也没少被辱骂。

而许王氏更因这么多年都没能生下一儿半女，受到的辱骂便更多了。

许三为了维护她，也不管自己会背上不孝的骂名，便与爹娘对骂、与嫡兄动手，到最后成了人人唾骂的不孝子孙，险些没把他逐出许家。而他自己也变得自私自利、惟利是图。

许仁昶则因受够了这样的日子便在朝廷募兵时，跑去从军了。其妻因生下的是女儿，便承担了不亚于许王氏的压力，后来更因生病，而许家不愿意多花费钱财救治，不久便病逝了，留下嗷嗷待哺的许相如。

许王氏见许相如可怜，而自己迟迟生不出孩子，便与许三商量将她抱回来养了。许三也没动休妻的念头，最终同意抚养许相如。

后来淮南路发生了干旱，四处闹饥荒，到处都是饥民，而许三的嫡兄更是紧紧地看着钱粮不让他们接触。迫于无奈，许三唯有带着许王氏和许相如到别处逃难。