冠山书院位于平定县西南不远的冠山景区半山坡上，周围环境幽静，曲径通幽，人文历史厚重。资料称，书院两进院落，西为窑洞式房间，凿于山体中，称“崇古洞”，故书院也称崇古冠山书院，南北有厢房数间，门外石坊北向，额题“登瀛”，通往书院有数座石坊，古色古香，凸显文化之气。书院初始建设不详，现在看到的建于清代嘉庆年代，为省级文物保护单位。