主体建筑用雪白的大理石砌成，上部为一高耸重叠的穹顶，以苍天为背景，轮廓优美；下部为八角形的陵壁，四面各有一扇高达米的巨大拱门。
传说中的神物“修正石”就在这座庙宇里。庙宇放弃了传统的神庙布局，完全按山崖谷地的原有布局把整个建筑设计成叠升的三层。台阶柱中央以平缓的梯道连接，最上层柱廊后面才是殿堂本部，其内殿则凿于山崖之中。正面柱廊用简单的方形柱，上层有些侧廊则用刻有凹槽的圆柱，形制优美，各种廊庑墙面皆有彩色壁画，柱廊外观则以清亮纯净的色调和作背景的悬崖相呼应。这种建筑手法被认为是古代建筑中和自然景观充分结合的典范。两层平台极其广阔，每层平台前设列柱和通廊，配有极细腻的浮雕，内容鬼王的生平事记。
鬼族曾经在此凿洞而居，而大规模在此挖掘洞穴则始于洪荒年间，当时的地府之人在此地挖掘栖身的洞穴、祠庙。也许是因为洞里冬暖夏凉，既能躲避山岩上面的严冬酷暑，又可防备猛兽和敌人的侵害，这里的每座小尖岩几乎都被挖空，每一座岩山就是一座祠庙，岩石被巧妙地琢成拱门、圆柱、拱顶。鬼仙们甚至把他们的住所挖到几乎无路可上的山岩顶尖上。这种营造活动一直持续到现在。因此，今天的这些山岩上布满