当时因为有人说金国首领长的像太祖皇帝赵匡胤，是来夺取当初被太宗抢去的江山的。加之太宗一脉，在后来死的死，俘虏的被俘虏，最终选择了太祖一脉的后裔过继为养子。当时后宫中张贤妃收养宗室赵伯琮为养子，吴氏收养赵璩为养子。
后来张贤妃去世，赵伯琮也被吴氏收养在膝下。宋高宗对两人极为看重，分别封赵伯琮、赵璩为普安郡王、恩平郡王。伯琮恭俭勤敏，聪慧好学，可当大任，吴皇后劝高宗立伯琮为皇太子。
于是在吴皇后和大臣的建议下，宋高宗将赵伯琮立为皇太子，改名为赵慎。
绍兴三十二年，高宗禅位于赵慎，是为宋孝宗。宋孝宗尊吴氏为寿圣太上皇后，吴太后此后尽心侍奉宋高宗。并且多次在宋高宗和宋孝宗父子两人之间周旋，为宋高宗和宋孝宗父慈子孝的名声作出诸多贡献。吴氏因其贤德，受到宋孝宗越发的看重与孝敬。宋高宗去世后，宋孝宗有意将吴太后接入宫中，被吴太后婉拒。
绍熙五年，宋孝宗去世，宋光宗继位，吴芍芬又被宋光宗尊为太皇太后。后来光宗因病退位，立皇子嘉王赵扩为宋宁宗，这期间还亲自主持宋孝宗的丧事。
公元1197年，吴芍芬去世，享年八十三岁，历经宋高宗、宋孝宗、宋光宗、宋宁宗四朝，成为中国历史上罕见的皇帝的曾祖母辈分的太皇太后。后辈为吴芍芬上谥号为“宪圣慈烈皇后”，葬永思陵和宋孝宗陵之间紧靠最近的地方。吴芍芬的去世，可以说是寿终正寝，自然死亡。