平遥古城“吉祥寺”位于花园街西段路北，坐北向南，寺东与文昌庙毗邻，总占地面积3978．8平方米。原为元代梁万户廉访家佛堂，后改为寺：明洪武年间重修，清道光二十年（1840）又重修，原规模较大，寺之南端曾有倒座的戏台和坐两向东的观音堂（今小仔）。寺院南有天王殿、春秋楼，正殿以及左右配殿等组成，建筑面积468．36平方米。

清同治六年（1867），寺院内曾设“团练总局”。民国年间至新中国建立后，常有学校占用。1956年拆毁正殿5间及东西配殿各5间。1958年拆除面阔、进深各3间的重担歇山顶芥秋楼。1973年11月15日，平遥县革命委员会公布吉祥寺（包括文昌庙在内）为县级重点文物保护单位。

1982年城关第二小学占用期间，县教育局擅自批准学校拆除东、西厢房各5间。西厢窑洞7间。寺、庙内现存完整的单体建筑、系元、明、清二代遗作。天主殴面阔3间，悬山顶，四架椽前后搭李用四柱，前后檐斗拱五铺作。单抄单昂，原装修不存。地上现存的附属文物仅有残碑1通。今吉祥寺，文昌庙均为城关中学所占有。