数年后,杨坚在后宫中遇见一位美丽的宫女,当时独孤皇后正生著病,与他分房而眠居于永安宫,杨坚寂寞难耐,因此对这女子颇有好感,上前询问之下,才知她是尉迟回的孙女。杨坚见她相貌美丽,言语不俗,当晚便留在了仁寿宫安歇。
数天后,独孤皇后病情好转,听说了这件事,异常愤怒嫉妒,于是趁著杨坚上朝听政的时候,派人将尉迟氏捉走准备处死,幸好当时的左仆射高颎于心不忍,将她救下,暗地里将她送往南方一户隐密人家。
由于尉迟氏乃前朝忠老遗孤,窦氏当时还曾暗中接应,派人护送尉迟氏安全抵达南方。
尉迟氏离开宫殿时已是珠胎暗结,到了南方后生下一女。但天有不测风云,高颎失势后这件事被揭发出来,盛怒的独孤皇后马上命人到南方杀了尉迟氏,连她借住的那户人家也惨遭灭门,只留下一名孤女。