​開基浄西は、大内義隆の家臣であったと伝えられている。義隆が、家臣陶晴賢の謀叛にあい、天文１２年（１５５１年）深川の大寧寺で自刃して果てた後、無情を感じて出家を願う。諸々を放浪し滝部の地に来り、刀禰役中山善兵衛宅に逗留する。見込まれてその娘と結婚、爾来中山姓を名告る。四男一女に恵まれる。男子ことごとく出家、長男浄忍は光輪寺、次男助西は西楽寺、三男浄友は法船寺、四男浄願は安養寺の祖となる。

二代助西は、寺地から恒安の梨木台（現滝部小学校所在地）に移住した。次いで、仏法弘通のためには毛利館周辺が格好の場所と、慶長６年（１６０１年）「父子力を合わせ、館下北方に寺を移す。助西７８才、順西３４才」と記録されている。

​毛利館は、滝部三千石を領する元鎮の館であった。毛利秀包（元就の９男）の嫡男である。慶長６年（１６０１年）、輝元の命により、父の遺骸を現在地西楽寺瑞雲台に葬る。側に吉敷毛利家老、白井兵庫入道平景俊の墓がある。秀包死してより１１年、幼君を補佐して後、殉死せしと古老伝える。

寛永１９年（１６４２年）四世浄誓の時、山号仏原山、寺号西楽寺が下賜される。

元禄１２年（１６９９年）６代浄翁のとき、本堂再建。

７代浄栄５５のとき、秀包の墓所に寺を移す議おこる。まず庫裡をと、延享２年（１７４５年）建築、延享５年（１７４８年）本堂移築。この時、徳浄寺で学問中の浄顕（８代）呼びもどされる。

現在の本堂裏の回遊式庭園はこの時に造られる。

明治４年（１８７１年）排仏毀釈の嵐吹きあれる中を本堂を再建。現在の本堂がそれである。

昭和４１年（１９６６年）１２代浄映の養女中山久、遺言により庫裡一建立。４７年（１９７２年）山門修復。

平成３年（１９９１年）本堂屋根修復・山門とともに甍本葺となる。

平成１３年（２００１年）庫裡新築。

​

​

​