御靈神社的主殿，是一栋有着等腰三角形般尖尖屋顶的建筑。屋顶的瓦片是青绿色的，也比较少见。 主殿外左右各挂了一盏白色的灯笼，纸质的灯笼上用黑色的毛笔写着：御灵神社。黑色的毛笔字，给人有一种庄重的感觉。