县衙始建于明代，现存为清代建筑，清初在原阳山卫旧址上重建。阳和城明代设两卫，阳和卫所在东街（已毁），高山卫所本址。清初两卫合并为阳高卫后合驻于此。 县衙府座北朝南，总占地面积约1.2万平方米，有大堂、二堂及三堂，三进三出，均为面阔7间，进深2间，单檐硬山顶，是迄今保存较好的衙署。县衙建筑群落布局合理、规模宏大，其建筑形式融南北之风格。