乡校是国家为了祭祀孔子和各位圣贤以及教育和教化地方居民而建立教育机构。最初建于朝鲜世宗2年（1420），因壬辰倭乱和1918年火灾烧毁，之后又重新建成，但因韩国战争又一次被火烧了。现在的建筑物是1951年重建的大成殿、1963年重建的学生宿舍东斋和西斋、1969年重建的明伦堂，之后依次复原了其他建筑物。

灵岩乡校有着教育空间和祭祀空间东西并排的特殊结构。学生聚集在一起学习的讲堂明伦堂规模为前面4间，侧面2间。有供奉包括孔子在内的中国和韩国圣贤排位的大成殿。此外，有区分两个空间的内三门。朝鲜时代国家支助土地和奴婢、书等来教学生学习，现在教育功能已消失，只有祭祀功能。