仁威观在元代就有了一些道教建筑，明永乐十年又进行了大规模的修建。和所有武当道教的宫观一样，仁威观主要有大殿、龙虎殿、灵官殿等一些主体建筑。现在这些殿堂在明代就已经被毁，人们只能从遗址上想象它当年的规模了。