岢岚县城是一座具有一千四百多年历史的老城，城内有一座又被称为姊妹楼的钟鼓楼，为明正统十四年知州魏迈从香宁寺移建于衙门正街南口，楼共三层，楼基石砌石座，飞檐歇山顶，纯木斗拱结构，造型雄伟壮丽，上悬“关河一览”和“响凌霄汉”牌匾，登该楼俯瞰县城可尽收全貌。在岢岚还有一段民间故事，说的是乾隆年间应县、浑源、岢岚的三位商人在并州一客栈相遇，适逢重阳佳节，俱觉思乡，便一桌闲谈。席间各夸家乡，面红耳赤，不亦乐乎。店家上前提议三人各夸一名胜，以比高下，并以房钱饭金为注，三人允诺。应县人首先发难：应县有木塔，离天只有丈七八；浑源人回道：浑源有个悬空寺，磨得天都吱吱吱；轮到岢岚人了，他豪饮一碗后应道：岢岚有个钟鼓楼，半截插在天里头，众皆诚服，推为上席。一九四八年四月四日，毛泽东主席与周恩来、任弼时等同志率中央机关东渡黄河前往华北西柏坡时曾路居岢岚县城，接见参加三级干部会议的全体人员，并留下“岢岚是个好地方”之深情赞语。