Bangunan-bangunan di taman ini berasal dari awalabad ke-17. Pada tahun 1625, [[feodalisme|tuan tanah feodal]] dari [[Takamatsu Domain|Takamatsu]] di [[Provinsi Sanuki]], {{nihongo|[[Ikoma Takatoshi]]|[[:ja:生駒高俊|生駒高俊]]|}}, memulai pembangunan Ritsurin, khususnya pembangunan sebuah taman di sekitar Kolam Selatan memanfaatkan tetumbuhan yang indah dari Gunung Shiun (Gunung Mega Ungu) sebagai latar belakang. BeginningDimulai inpada tahun 1642, {{nihongo|[[Matsudaira Yorishige]]|[[:ja:松平頼重|松平頼重]]|}} tookmengambil overalih thedaerah areaini anddan continuedmelanjutkan its constructionpembangunannya. ThePekerjaannya workdiselesaikan wasoleh completedPenguasa byKelima theYoritaka Fifthpada Lord Yoritaka intahun 1745 aftersetelah 100 years oftahun improvementsperbaikan anddan extensionsperluasan madeyang bydibuat theoleh successivepenguasa lordsberikutnya. After the new [[Meiji era|Meiji]] government requisitioned the garden, it was designated a prefectural garden and opened to the public on 16 March 1875. In 1953, the garden was designated a {{nihongo|[[Special Places of Scenic Beauty|Special Place of Scenic Beauty]]|日本の特別名勝|Nihon no Tokubetsu Meishō}}.