1971年,胡博士毅然以畢生積蓄70萬元,在跑馬地購下三層小洋房,聯同夫人鍾期榮女士(已於2014年離世)創辦樹仁書院,並堅持四年制教育理念。雖然在1990年代曾有機會轉型為受資助的三年制學院,他仍選擇堅守初衷。最終,書院在2006年獲政府認可為本港首間私立大學,為高等教育開創新里程。
胡博士一直強調品格與國民教育的重要,「我們應當愛中國,因為我們是中國人」是他對學生的第一課。他與夫人奉獻半生心力,將數億元注入教育事業,將「敦仁博物」校訓付諸實踐。
胡博士生於1920年浙江紹興,早年畢業於中央政治大學外交系,後赴法國、英國深造,取得法學博士及大律師資格,返港後積極參與民生工作,推動中文成為官方語言,貢獻深遠。

