這一所美麗的圖書館是本地出身的台灣資生堂股份有限公司董事長李進枝先生，總經理李阿青先生暨其命兄李阿堆先生昆仲，為紀念他們的父親李輝義老先生而興建。
輝義老先生是怎樣的一個人呢？是有錢有勢的人嗎？是有學問的人嗎？都不是，他只是日人統治時代普通的一個貧苦人家，每天辛苦工作兼做一點小生意，養活一家人。日子雖然過得苦，但他很勤歛，樂天知命，並且從不灰心喪志。他十分懂得做人的道理，認為一個人活在世上，不僅要飲水思源，更要樂觀奮鬥，力爭上游,；求學時代固然要用功，畢業後進社會，也仍然要讀書求進。因此，他經常勉勵子女用功\讀書，長大後好好為社會人群服務。他的三個兒子秉承這樣的庭訓，努力奮鬥，終於有了不凡的成就，並抱持回饋社會的情操，興建了這所圖書館，捐給政府。
現在，這所美侖美奐的圖書館，代表了李輝義老先生「樂觀奮鬥、飲水思源」的偉大精神，同時也表達了他的兒子們使人生更豐美的意願。因為一個人活在世上,，除了經常讀書以便擴展知識領域，並陶冶性情，提昇自我之外，更沒有別的方法使一個人的人生更美化、更豐富。