复其家。楚材初言僧道中避役者多，合行选试，至是始行之。
时诸路官府，自为符印，僭越无度。楚材奏并仰中书依式铸造，于是名器始重。因奏时务十策，曰：“信赏罚，正名分，给俸禄，封功臣，考殿最，定物力，汰工匠，务农桑，定土贡，置水运。帝虽不能尽用，亦择而行之。”
十年，天下旱蝗。帝问御灾之术，楚材曰：“今年租赋乞权行停阁。”帝恐国用不足，楚材奏仓库之储可支十年，帝允之。初籍天下户得一百四十万，至是逃亡者十四、五，而赋仍不减，天下病之。楚材奏除逃户三十五万，民赖以苏。
富人刘忽笃马等扑买天下课税，楚材曰：“此剥下罔上之奸人，为害甚大。”奏罢之。尝曰：“兴一利不如除一害，生一事不如省一事。”世称为名言。
先是，楚材定课税之额，每岁银一万锭，后增至二万二千锭。译史安天合谄事左丞相镇海，引回回人奥都剌合蛮扑买课税，增至四万四千锭。楚材曰：“虽取四十四万亦可得，不过攘夺民利耳，民穷为盗，非国之福也。”帝不听，楚材反复辩论，声色惧厉。帝曰：“汝欲搏斗耶？”楚材力不能夺，乃太息曰：“民之穷困，自此始矣！”楚材每陈天下利病，生民休戚，词气恳切，言与泣下。帝曰：“汝又欲为百姓哭耶？”
帝嗜酒，楚材屡谏不听，乃持酒槽铁口进曰：“曲蘖能腐物，铁尚如此，况人五脏！”帝悟，语近臣曰：“汝辈爱君忧国之心；有如吾图撒合里者耶。”以金帛赐之，敕近臣曰进酒三钟而止。
楚材初拜中书令，引镇海、粘合重山为同事，权贵不能平。咸得卜尤嫉之，谮于宗王皇叔曰：“楚材多用南朝旧人，必有二心，宜奏杀之。”宗王遣使奏闻，帝察其诬，责使者遣之。后有告咸得卜不法者，帝命楚材鞫之，奏曰：“咸得卜性倨傲，又暱群小，易得谤。令将南伐，他日治之未晚也。”帝私谓左右曰：“楚材不较私仇，真长者，汝辈宜效之，”有道士诬其仇为逃军，结中使及通事杨惟忠执而杀之，楚材按治惟忠，中使诉楚材违制。帝怒，暴系楚材，既而自悔，命释之，楚材不肯解缚，进曰：“臣备位宰相，陛下以臣有罪而系之，又以臣无罪而释之，反覆轻易如戏小儿，国有大事何以行焉！”众失色，帝曰：“朕宁无过举？”乃温言谢之。转运使吕振、副使刘子振以脏抵罪，帝责楚材曰：“言卿孔之教可行，何故有此辈？”对曰：“孔子之教，万世由之，如天之有日月也。岂得缘一人之失，而废发万世常行之道乎！”帝意乃释。
十三年冬十一月，帝崩。皇后以储嗣问，对曰：“此事非外臣所敢议，且有先帝遣诏，遵之则社稷幸甚。”皇后称制，奥都剌合蛮以贿得执政，大臣悉畏附之，惟惮楚材沮其事，以银五万两赂之。楚材不受。皇后以御宝空纸付奥都剌合蛮，使便宜填行。楚材奏曰：“天下者，先帝之天下，号令自先帝出，今如此，臣不敢奏诏。”寻有旨：奥都剌合蛮奏淮事理，令史不书者，断其手。楚材曰：“军国之事，先帝悉委老臣，令史何与焉？若事不合理，死且不避，况断手乎！”因厉声曰：“老臣事太祖、太宗三十余年，不负国家，皇后岂能以无罪杀之。”后虽怒其忤己，亦以先朝勋旧，深加敬惮焉。
皇后称制三年夏五月，卒，年五十五。有谮于后曰：“楚材为宰相二十年，天下贡赋半入其家。”后命中使麻里札覆视之，仅琴阮十余，及古今书画、金石、文字数十卷，无他物。
楚材从释万受佛学。一日，万松造之，楚材方饭，惟以菜根蘸油盐而已。其俭于自奉如此。
旁通天文历算及医卜之书。太祖亲征西域，祃旗之日雪三尺，帝疑之。楚材曰：“此克敌之征。”冬，雷，又问之，对曰：“苏尔滩当野死。”已而果然。苏尔滩，西域王号也。蒙古未有历学，太祖十五年，西域人奏五月望夕月食，楚材曰：“否。”果不食，明年，楚材奏十月望当月食，西域人曰不食，是夜月食八分。帝曰：“汝于天上事尚无不知，况人事乎！”是年八月，长星现西方，楚材曰：“女直将易主矣。”明年而金主殂。帝出兵，必命楚材卜，帝亦自灼羊脾以相符应焉。太宗十三年十一月，帝出猎，楚材以太乙数推之，亟言不可。左右皆曰：“不骑射无以为乐。”猎五日而帝崩。皇后称制二年五月，荧惑犯房，楚材奏：“当有驾扰，然无事。”未几亲王斡赤斤引兵至，人心震骇，后欲西迁避之，楚材曰：“朝廷天下根本，岂可动摇，臣观天道，必无患也。”后数日而事定。楚材尝言：西域历五星密于中法，乃作麻答把历，又以日食躔度与中法不同，以《大明历》浸差故也，乃定其父所撰乙未元历以行于世云。
至顺元年，赠经国议制寅亮佑运功臣、太师、上柱国，追封广宁王，谥文正。二子：铉，监开平仓，早卒；铸。
铸，字成仲，幼聪敏，善属文，尤工骑射。楚材卒，领中书省事，上言宜疏禁网，采历代善政之可行者八十一事以进。从宪宗伐宋，领侍卫骁果，属出奇计，赐尚方金锁甲及内厩骢马。