宋老夫人夫婦倆一番合計，為了自己也為了宋安恂，決定推掉與季家的婚事。
只是季家哪裡肯輕易推了，由其是在知道宋老夫人夫婦倆達後，自是希望自己女兒能嫁入侯府，成為官家夫人。
一番對峙，兩方都不退讓。
最後還是宋安恂父親提議給予季家長子好處，迫使季家同意退婚。
一開始季家並不同意，但在威逼利誘之下，還是妥協了。
女兒的幸福與兒子的前程想必，季家選擇了兒子的前程。
季家得到了宋老夫人夫婦的承諾，回到老家。
可也因為這份交易，導致小季氏在家鄉受人嘲笑。
主要會這般，也因著季家人先前四處吹噓，說自家女兒要嫁入豪門。結果沒多久，小季氏就讓人退婚了。一些好事之徒，就各種譏笑小季氏。
如此一來，小季氏的名聲在家鄉算是徹底壞了。
那個時候，小季氏還不知道自己被退婚的真正原因。
直到數年後，季家為了早早打小季氏，打算將小季氏嫁給一個年過半百的老漢。那老漢不但相貌醜陋，還品行不佳，在小季氏家鄉是臭名昭彰。
季家之所以同意這門婚事，除了老漢出巨資聘娶，還有縣上無人要娶小季氏，最重要的是小季氏長嫂看小季氏不順眼，打算將小季氏趕走。
小季氏心中雖不甘，可也無能為力。原打算認命，不想偶然間聽見長兄與長嫂談論當年的事情，知曉婚事被推的緣由。
內心的不甘於不平，迫使小季氏逃出了家，獨自一人逃去了燕京，打算與宋安恂相認。
可當小季氏到了燕京，看到的卻是宋安恂與袁氏夫妻恩愛，兒女成雙。
“你可知那時我見到你與袁氏恩愛的模樣，心中有多麼妒恨。”小季氏平靜的說道“明明這一切都是屬於我的，可就因為你的父母，害的我名聲受損，只能嫁一個臭名昭彰的老漢。我不甘心，所以我……”
小季氏看到屬於自己的一切被別的女人搶走，心中十分不甘。她找上了宋老夫人，利用宋老夫人對她的愧疚，得以在威遠侯府暫住。
為了奪回屬於她的一切，她有意挑唆宋安恂與袁氏不和。
宋安恂長子的突然夭折，給了小季氏機會。
小季氏趁著宋安恂與袁氏爭執，故意親近宋安恂，然而有意無意的透漏給袁氏聽。
袁氏剛剛喪子，又得知這樣的事情，自是氣憤。
但是那個時候宋老夫人偏護小季氏，袁氏也沒有證據指正小季氏，只能獨自生悶氣。
因著孕期情緒不佳，縱使袁氏身體健康，在生宋知玲的時候還是元氣大傷，時常臥於床榻。
小季氏見狀，知道自己的機會來了。一面在宋安恂面前討好，一面給袁氏添堵。
直到宋知璟的出身，宋安恂與袁氏的關係徹底破裂。宋安恂本就不是那種軟性子，在袁氏的刺激下，將宋知璟抱入侯府。但他也顧忌自己父親，便聲稱宋知璟是房中姨娘所出。
外人不知真相，可袁氏與宋老夫人知道。
因著這事，袁氏一病不起，最後撒手人寰。
小季氏則趁著這個機會向宋安恂大獻殷情，同時也遊說宋老夫人，終於憑藉著有孕可以進威遠侯府。