砖墙的砌筑，实在是当时火炮技术下的防守所需。“万历三年（1575），知县孟一脉用砖石包城”，“万历五年（1577），知县董九仞广植树木与四濠，修茸圮坏，万历二十二年（1594），知县周之度申请抚安，动本县民壮，修筑东西瓮城者三，皆以砖石”。

清康熙二十三年（1684），“因霪雨损坏，知县奉天黄汝钰捐俸修补，屹然完固，共计城墙二十五丈，城垛一百二十三堞”。嗣后十年间，连年补筑修缮，工程从未间断。

康熙四十二年（1703），一举“补修南外城二十余丈。四十三年（1704）正月，补修南外城三十五丈，四十四年（1705）四月，补修上东门大门楼并门洞，四十五年（1706）二月，沿城植槐柳”。再后的150年间似平不曾有保养维修，城墙残损甚重。

道光三十年（1850），“太平天国”义军崛起，声震华夏，统治者为了对付农民起义，“预防发逆”，一举补筑东西北五门并将南门增高数尺，四隅角楼也加大了高度与体量，并予重修，敌楼也照旧数重建，同时扩宽了护城濠道，砌筑了跨濠石桥7道，并添修水闸。浩大的防卫工程一直持续至咸丰六年（1856）冬“始竣”。其时，城池进一步臻于完善，规制保留至今。