自思退唱和議，欲興大獄以鋤異己者。既被罪罷黜，時參知政事周葵行相事，聞諸生有欲相率伏闕者，奏以黃榜禁之，略云：“靖康軍興，有不逞之徒，鼓倡諸生伏闕上書，幾至生變。若蹈前轍，為首者重置典憲，餘人編配。”黃榜出，物論譁然。於是，太學生張觀、宋鼎、葛用中等七十餘人，上書請誅湯思退、王之望、尹穡曰等誤國妒賢奸臣曰：

揚州退敵之後，虜人不敢南下。湯思退首唱和議，之望、尹穡附之，極力擠排。遂至張浚罷去，邊備廢弛，墮敵計中。天下為之寒心，而思退輩方以為得計。今敵人長驅直至淮甸，皆思退等三人懷奸誤國，此三人之罪，皆可斬也。願陛下先正三賊之罪以明示天下，仍竄其党洪适、晁公武，而用陳康伯、胡銓為腹心，召金安節、虞允文、王大寶、陳俊卿、王十朋、陳良翰、黃中、龔茂良、劉夙、張栻、查籥，協謀同心，以濟大計。

時帝大怒，欲加湯思退重罪。侍御史晁公武及右正言龔茂良同入對以為解救，帝怒稍霽，王之望亦為之救解，乃止。於是，湯思退在自臨安還處州途中聞朝廷令謫於永州，乃知為太上皇帝亦不复肯為保，乃大感概自惜。既被黜謫，乃於回鄉道途中接獲再與行遣詔旨後，作《西江月·被謫懷感》，流露了自己被朝廷戲耍不值的悔恨之情。其詞曰：

四十九年如夢，八千里路為家。思量骨肉在天涯，暗覺盈盈淚灑。

玉殿兩朝拜相，金旨七度宣麻。番思世事總如華，枉做一場話靶。

先是，侍御史尹穡請置獄，取不肯撤備及棄地者，核其罪，庶和議決成，所指凡二十餘人，由是，擢尹穡為左諫議大夫，而晁公武亦自殿中侍御史遷侍御史，時洪适以中書舍人兼直學士院，故此，湯思退之黨尚能左右朝政，而孝宗乃更遣中使急赴處州賜湯思退死，而地方州府乃以湯思退憂懼以終奏聞於朝廷。湯思退既薨，乃厝於處州靈山寺凡三十年，直至其長子碩進拜兵部尚書後，方奏請乃父歸葬。而湯思退也並非如本傳所云卒於赴永州貶所道中的信州境內。

至於尹穡，《鶴林玉露》載有一則尹穡軼事，曰：

尹穡字少稷。博學工文，不汲汲於仕進。諸公薦之，與陸務觀同賜出身。後附湯思退，力排張魏公，以是除諫議，公論始薄之。後貶嶺南歷年，蒙恩北歸。周益公素與之善，便道來訪，謂益公曰：“某三十年閉戶讀書，養得少名，思之不審，所得於彼者幾何？而破壞埽地，雖悔何及！”悵然久之。益公每舉以為士大夫末路之戒。

注：周益公即周必大。