，群憸和附，疾正士如仇雠，而衣冠之祸始矣。
侂胄欲逐汝愚而难其名，或教之曰：“彼宗姓，诬以谋危社稷，则一纲无遗。”侂胄然之，擢其党将作监李沐为正言。沐，彦颖之子也，尝求节度使于汝愚不得，奏：“汝愚以同姓居相位，将不利于社稷，乞罢其政。”汝愚出浙江亭待罪，遂罢右相，除观文殿学士、知福州。台臣合词乞寝出守之命，遂以大学士提举洞霄宫。
国子祭酒李祥言：“去岁国遭大戚，中外汹汹，留正弃相位而去，官僚几欲解散，军民皆将为乱，两宫隔绝，国丧无主。汝愚以枢臣独不避殒身灭族之祸，奉太皇太后命，翊陛下以登九五，勋劳著于社稷，精忠贯于天地，乃卒受黯黮而去，天下后世其谓何？”博士杨简亦以为言。李沐劾祥、简，罢之。太府丞吕祖俭亦上书诉汝愚之忠，诏祖俭朋比罔上，送韶州安置。太学生杨宏中、周端朝、张ＴＬ、林仲麟、蒋傅、徐范等伏阙言：“去岁人情惊疑，变在朝夕。当时假非汝愚出死力，定大议，虽百李沐，罔知攸济。当国家多难，汝愚位枢府，本兵柄，指挥操纵，何向不可，不以此时为利，今上下安恬，乃独有异志乎？”书上，悉送五百里外羁管。
侂胄忌汝愚益深，谓不重贬，人言不已。以中丞何澹疏，落大观文。监察御史胡纮疏汝愚唱引伪徒，谋为不轨，乘龙授鼎，假梦为符。责宁远军节度副使，永州安置。初，汝愚尝梦孝宗授以汤鼎，背负白龙升天，后翼宁宗以素服登大宝，盖其验也，而谗者以为言。时汪义端行词，用汉诛刘屈氂、唐戮李林甫事，示欲杀之意。迪功郎赵师召亦上书乞斩汝愚。汝愚怡然就道，谓诸子曰：“观侂胄之意，必欲杀我，我死，汝曹尚可免也。”至衡州病作，为守臣钱鍪所窘，暴薨，天下闻而冤之，时庆元二年正月壬午也。
汝愚学务有用，常以司马光、富弼、韩琦、范仲淹自期。凡平昔所闻于师友，如张栻、朱熹、吕祖谦、汪应辰、王十朋、胡铨、李焘、林光朝之言，欲次第行之，未果。所著诗文十五卷、《太祖实录举要》若干卷、《类宋朝诸臣奏议》三百卷。汝愚聚族而居，门内三千指，所得廪给悉分与之，菜羹疏食，恩意均洽，人无间言。自奉养甚薄，为夕郎时，大冬衣布裘，至为相亦然。
汝愚既殁，党禁浸解，旋复资政殿学士、太中大夫，已而赠少保。侂胄诛，尽复元官，赐谥忠定，赠太师，追封沂国公。理宗诏配享宁宗庙庭，追封福王，其后进封周王。子九人，崇宪其长子也。
崇宪，字履常，淳熙八年以取应对策第一，时汝愚侍立殿上，降，再拜以谢。孝宗顾近臣曰：“汝愚年几何？已有子如此。”越三年，复以进士对策，擢甲科。上谓执政曰：“此汝愚子，岂即前科取应第一人者耶？”
崇宪初仕为保义郎、监饶州赡军酒库，换从事郎、抚州军事推官。汝愚帅蜀，辟书写机宜文字，改江西转运司干办公事，监西京中岳庙。汝愚既贬死，海内愤郁，崇宪阖门自处。居数年，复汝愚故官职，多劝以仕。
改奉议郎、知南昌县事，奉行荒政，所活甚众。升籍田令，制曰：“尔先人有功王室，中更谗毁，思其功而录其子，国之典也。”崇宪拜命感泣，陈疏力辞，以为“先臣之冤未悉昭白，而其孤先被宠光，非公朝所以劝忠孝、厉廉耻之意。”俄改监行在都进奏院，复引陈瓘论司马光、吕公著复官事申言之，乞以所陈下三省集议：“若先臣心迹有一如言者所论，即近日恩典皆为冒滥，先臣复官赐谥，与臣新命，俱合追寝。如公论果谓诬蔑，乞昭示中外，使先臣之谗谤既辨，忠节自明，而宪圣慈烈皇后拥佑之功德益显。然后申饬史官、改正诬史，垂万世之公。”
又请正赵师召妄贡封章之罪，究蔡琏与大臣为仇之奸，毁龚颐正《续稽古录》之妄。诏两省史官考订以闻。已而吏部尚书兼修国史楼钥等请施行如章，从之。及诬史未正，复进言，其略谓：“前日史官徒以权臣风旨，刊旧史、焚元稿，略无留难。今诏旨再三，莫有慨然奋直笔者，何小人敢于为恶，而谓之君子者顾不能勇于为善耶？”闻者愧之。其后玉牒、日厉所卒以《重修龙飞事实》进呈，因崇宪请也。
未几，赠汝愚太师，封沂国公，擢崇宪军器监丞，改太府监丞，迁秘书郎，辞，弗许。寻为著作佐郎兼权考功郎官。尝因闵雨求言，乃上封事，谓：“今日有更化之名，无更化之实。人才，国之元气，而忠鲠摈废之士，死者未尽省录，存者未悉褒扬。言论，国之风采，其间输忠亡隐，有所规益者，岂惟奖激弗加，盖亦罕见施用；偷安取容，无所建明者，岂惟黜罚弗及，或乃遂阶通显。”至若勉圣学以广聪明，教储贰以固根本，戒宰辅大臣同寅尽瘁以济艰难，责侍从台谏思职尽规以宣壅蔽，防左右近习窃弄之渐，察奸憸余党窥伺之萌，皆恳恳为上言之。
请外，知江州。郡民岁苦和籴，崇宪疏于朝，永蠲之。且转籴旁郡谷别廪储之，以备岁俭。瑞昌民负茶引钱，新旧累积，为缗十七万有奇，皆困不能偿，死则以责其子孙犹弗贷。会新券行，视旧价几倍蓰，崇宪叹曰：“负茶之民愈困矣。”亟请以新券一偿旧券二，诏从之。盖