由于马谡的出色表现，导致第一次北伐功亏一篑，此后魏国加强了防备，采取以空间换时间的方法，放弃一切不重要的城市，拖到了诸葛亮星落五丈原的那一天。
此后，吴懿也表现的非常低调，朝堂之上，再也难以见到他的身影。
“怎么，哥，你这是想退出了吗？”突然有一天，吴苋问他。
“妹妹啊，你是不懂政治啊，我现在之所以这么消沉，只是因为陛下再丞相死后开始宠信小人，不思进取了，我强行要继丞相之意志，那么很快就会有小人告发我了。”吴懿说。
“大哥，你以为我不了解你啊？你现在想的是陛下和朝中很多人已经忘记了最初的理想，现在他们和曹魏那些人没有什么区别了吧！”
“这都被你看穿了？是的，我确实是这么想的，目前拥有救民兴汉目标的人越来越少了，陛下更是完全只顾享乐不管朝政，我就算攻下雍凉二州，那么不过是延缓了三国结束的时间，反而使得百姓的痛苦加剧。恐怕朝廷上下也就姜维和之前我们入蜀时的那些老将还有天下之心了吧，所以，我想退出了，我的能力已经不足以扭转天命了。事实上，早就没有那个可能了吧。”
“这好说，我可是太后，我这样这样，你再趁机伤疏请求告老还乡，就行了。”吴苋说。
数日之后，吴苋带领刘禅的后宫之一胡氏去了自己家，在家里，吴苋多次挽留胡氏，胡氏不好意思回去，就和吴苋，当然包括吴懿住了几天。
刘禅得知此消息，他虽然对政事不上心，对这种事还是上心的。于是就问吴苋你叫胡氏回家干吗，吴苋说：“胡氏受屈，吴懿心不安。”
刘禅顿时起疑，说：“你哥哥和胡氏有什么关系？”
吴苋笑了：“我哥哥都已经是个老头子了，生理功能早就不行了，能有什么事？”