耶律楚材於1190年7月24日生於燕京，是遼太祖耶律阿保機的九世孫，金朝尚書右丞耶律履之子。耶律楚材兩歲時，父親去世，跟隨母親生活，受到母親影響。耶律楚材生於燕京，並且耶律家世代受漢文化影響，因此，耶律楚材的漢文化底蘊也十分深厚，並且信仰儒家文化，以儒家思想來治理天下。耶律楚材以自己的才智輔助了兩代君主，深受帝王信任。
元史《耶律楚材傳》中對耶律楚材進行了詳細的介紹。首先總的介紹了耶律楚材的字，名以及家庭背景，敘述了耶律楚材的國人才智，精通天文，地理，佛、道、醫、卜等學問並也因此受到了重視，向帝王提出有利於百姓民生的多項建議，均得到的實施。以及耶律楚材在乃馬真後執政時期受到排擠，最終抑鬱而死。接着列舉了關於耶律楚材的種種具體事例來對耶律楚材進行介紹。先是列舉了耶律楚材在占卜方面的才能，數次爲帝王進行占卜，最後都得以驗證，因此每次出行之前都要讓其進行占卜。接着列舉了耶律楚材在政治方面的才能，比如耶律楚材在輔佐帝王期間爲帝王提出了一系列建議，平定了國內的政亂，使的官吏不再欺壓百姓;挽救了很多投降地百姓的性命還有勸諫太祖對於中原地區要採用中原地區的辦法進行治理等等諸多事件。列舉是事件中體現的不僅僅是耶律楚材的政治頭腦，還有他的仁厚，尊重百姓，以及高超的說話技巧等多個方面的才華。最後耶律楚材在乃馬真後執政期間去世，享年55歲。皇后按照其生前遺願，將其安葬在了玉泉山下。
耶律楚材傳從生活，政治，家庭等各方面對耶律楚材進行了詳細的闡述，向我們展現了耶律楚材的一幅立體畫像，對其瞭解更加深厚，人格更加讚賞。耶律楚材是蒙古帝國大臣，先後侍奉了成吉思汗、窩闊臺汗兩任大汗，爲蒙古的建立，發展及繁榮都貢獻出了自己的力量。在成吉思汗在任期間對耶律楚材就無比信任，在去世之前對窩闊臺說一定要信任耶律楚材，對他委以重任。窩闊臺在位期間也聽從耶律楚材的很多建議，是蒙古國得以不斷地發展，壯大。但在窩闊臺去世之後，皇后脫列哥那，史稱乃馬真後趁機奪取政權，收買了親屬及一些大臣，掌權長達5年之久。在皇后脫列哥那掌權期間，啓用一些諂媚，不學無術之臣，打擊忠良之士，漢法名臣。作爲一個國家的掌權人，她只知道搜刮財物，盡情享樂，爲人斤斤計較，注重私人恩怨。而作爲國家重臣的耶律楚材也很自然的仕途開始變得坎坷，受盡排擠。
脫列哥那執政期間，重用奧都剌合蠻，對他十分信任。爲此罷免了財政大臣和大宰相鎮海，並將汗廷的印章和空紙交給了奧都喇合蠻，讓他自己填寫，後遭到耶律楚材的強烈反抗，最終不了了之。後來脫列哥那又頒佈一系列法令支持奧都剌合蠻，而每次耶律楚材都給予反對意見，長此以往，真乃皇后便對耶律楚材有了很大的反感，處處針對耶律楚材。耶律楚材在政治上空有一腔抱負，但卻無處施展。眼看着國家在脫列哥那的統治下法度不一，內外交困，使得人民怨聲載道，官場上烏煙瘴氣。耶律楚材長期鬱鬱寡歡，最終於公元1244年抑鬱而死。
耶律楚材因與元乃真馬皇后的政見多有不同，屢遭迫害，抑鬱難平，於1224年6月20日，逝世於蒙古高原，享年55歲。耶律楚材死後乃馬真後派近臣麻裏扎查驗家產，結果卻發現耶律楚材爲官數十載甚至作爲兩代皇帝重用的的大臣，家中只有琴阮十餘，古今書畫、金石、遺文數千卷而已。真是一心爲公，清正廉潔。蒙古人民聽聞耶律楚材死訊之後也悲傷不已，紛紛用各自的行動來表達對耶律楚材的敬重和懷念。耶律楚材死後遵循他的遺願，將耶律楚材的遺體運回燕京故里，將他安葬在了玉泉山下的甕山泊(今昆明湖)之濱，並且與他的先去世的夫人進行了合葬，併爲之建廟立像。耶律楚材生前就十分喜歡玉泉山下的環境，他晚年號玉泉老人也正是因此得名。
耶律楚材祠是一所雙層套園，院中有三間北房都是祠堂，並且擺放着一張供桌。門前豎着一座石碑，石碑上刻着乾隆皇帝的御製詩，旁邊還立着一個石翁仲。三間北房裏堆起一座幾米高的土紅色巨家，就是耶律楚材以及他的續絃夫人蘇氏合葬的墳墓。耶律楚材祠因時代變遷和歷史問題幾經興廢。明代，由於中原人對於蒙古族的痛恨，耶律楚材祠遭到破壞，祠堂被毀，墳墓被剷平，石人也被推倒砸壞。到了乾隆十五年，乾隆對耶律楚材的政績予以肯定，因此命人在原地重新修建祠堂，恢復墓地，並在中間供奉塑像，爲其親筆題詩。到1984年，耶律楚材祠經過修整後又重新開放，遊人又可以來此處參觀憑弔。耶律楚材祠的恢復與開放，是世人對於耶律楚材所作所爲的一種肯定和讚賞，是對於歷史的一種認可。
