虽然威远炮台主要设防在海边，但山上也有诸如镇远、靖远、南山顶、蛇头湾等炮台所拱卫，所以在山上设置营房必不可少。现在顺着修好的台阶爬上来都感到气喘吁吁，当年的将士们在条件那么艰苦的情况下依然奋勇作战，无比敬佩他们的爱国精神。实际上，山顶营的位置只剩下比较破败围墙和碎石，这里比虎门大桥的桥塔还要高，风光明媚。而在半山腰则有很明显的清兵营房遗址，特别有沧桑感。