陛下初政清明，登用忠良，然曾未逾时，朱熹老儒也，有所论列，则亟使之去

吕祖俭字子约，金华人，祖谦之弟也。受业祖谦如诸生。监明州仓将上会祖谦卒部法半年不上者为违年祖俭必欲终期丧朝廷从之诏违年者以一年为限自祖俭始。终更赴铨，丞相周必大语尚书尤袤招之，祖俭已调衢州法曹而后往见。潘时经略广东，欲辟为属，祖俭辞。除司农簿，已而乞补外，通判台州。宁宗即位，除太府丞。时韩侂胄浸用事，正言李沐论右相赵汝愚罢之。祖俭奏：“汝愚亦不得无过，然未至如言者所云。”韩侂胄怒曰：“吕寺丞乃预我事邪？”
会祭酒李祥、博士杨简皆上书讼汝愚，沐皆劾罢之。祖俭乃上封事曰：“陛下初政清明，登用忠良，然曾未逾时，朱熹老儒也，有所论列，则亟使之去；彭龟年旧学也，有所论列，亦亟许之去；至于李祥老成笃实，非有偏比，盖众听所共孚者，今又终于斥逐。臣恐自是天下有当言之事，必将相视以为戒，钳口结舌之风一成而未易反，是岂国家之利邪？”
又曰：“今之能言之士，其所难非在于得罪君父，而在忤意权势。臣恐事势浸淫，政归幸门，不在公室。私忧过计，深虑陛下之势孤，而相与维持宗社者浸寡也。”疏既上，束檐待罪。有旨：吕祖俭朋比罔上，安置韶州。祖俭至庐陵，将趋岭，得旨改送吉州。遇赦，量移高安。二年卒，诏令归葬。
祖俭之谪也，朱熹与书曰：“熹以官则高于子约，以上之顾遇恩礼则深于子约，然坐视群小之为，令子约触群小而蹈祸机，其愧叹深矣。”在谪所，读书穷理，卖药以自给。每出，必草履徒步，为逾岭之备。尝言：“因世变有所摧折，失其素履者，固不足言矣；因世变而意气有所加者，亦私心也。”所为文有《大愚集》。