新华门的对面，曾经有过一座规模宏大的清真寺。它的始建以及被毁，都充满了神秘色彩。这就是传说中乾隆皇帝为香妃建造的回回营清真寺。

    1759年(乾隆二十四年)时，在皇城南墙外，即现在的东安福胡同北侧建回回营，供回部族人居住。不久又兴建了回回营清真寺，这个回回营与其它北京回回营不同，这里都是在平定大小和卓战争中有功的维吾尔族人，生活方式和信仰与被汉族同化了许多年的本地回族不同，民间又称这里红帽子回回。