高义园位于天平山南麓，始建于唐宝历年间，原为宋朝范仲淹祠堂。 　　高义园共五进，依山而建，地坪逐进升高，纵深约70米。入头门，经仪门，第三进今额“乐天楼”，原名御书楼，旧称宸翰楼，是座宏敞精致的重檐歇山式建筑。面阔15米，进深10米，上下均为三开间，下为回廊周匝的四面厅，上为四面栏窗的敞阁。第四进为凌空高架的逍遥厅，与乐天楼互为对景；亭为歇山式，左右出两翼若双阙，有重楼复阁之势。后院为高义园正殿，单檐歇山造，面阔三间，内有乾隆十六年（1751）弘历初游天平时所题“高义园”蓝底金字盘龙匾，和他手书的“游天平十六韵二首”诗碑两方。