始建于明嘉靖十六年（1537年比1573还早）。当时称“大观台”。状如城门，下有拱石门洞，可通车马，建楼其上，四望巍然；上置钟楼，报时报警，故称“钟鼓楼”。

    清光绪十五年（1889年）毁于火。

   1928年才在原址将残楼拆除重建。工程由留德工程师税西恒先生设计并监督施工。上置由德国购回自动报时机械巨钟。楼顶四方有钟盘，准确报时，响彻全城，钟鼓楼因渐成泸州城的标志。

    1939年9月1日，日机有36架对泸州城肆行轰炸，巍巍建筑只楼体遗骸残存了。

    1952年再次培修，层修梯级，建石围栏，晨昏中午，鸣笛报时。

    1966以后期间，又遭破坏。     

    1992年8月27日，台湾泸州同乡会副会长易铸九先生携台胞百人为修复钟鼓楼所捐人民币12.81万，事见报后，泸州各界纷纷响应，慷慨出资共襄盛举。修复后的钟楼采用内框架结构，楼顶四面可见的圆盘时钟，已由过去德国机械钟换成了国产电子自鸣钟，外型也培整一新。