红山嘴上的宝塔堪称乌鲁木齐一绝。为“镇山锁水”，清代乾隆53年（1788年），清都统尚安在红山之巅建造了一座九级青灰“镇龙宝塔”，至今完好无损。它与雅玛里克山的宝塔遥相呼应。每当夕阳西照，塔影斜长，以其独特的风姿成为乌鲁木齐市永久的标志和象征。

远眺楼位于红山最高处，登上楼顶“万景俱从一阁收”，远眺天山群峰美不胜举，近看繁华市容尽收眼底。

民族英雄林则徐曾在红山写下：“任狂歌、醉卧红山嘴。风劲起，酒鳞起”的诗句。为纪念他的伟绩，在红山宝塔侧塑立了他的雕像，安放了禁毒铜鼎，红山成为新疆第一个禁毒教育基地。

大佛寺是一座汉传佛教寺庙。据了解，红山原有一组古庙群，相继建于1797年前后。原古庙群沿红山脚下，由东向西排列：东端是大佛寺，中间是玉皇庙，西端是地臧庙。当年的红山古庙群曾是乌鲁木齐古典建筑的荟萃，也是庙会游览的胜地，每逢庙会，红山的庙宇全部开放酬神演戏，朝供不绝。

1933年，盛世才把红山的庙宇都拆毁了，解放前夕，红山只有孤塔一座，庞大的古寺庙群也仅存大佛寺山门一座，一片荒凉。1989年扩建红山公园时，因古庙山门年久失修，濒临倒塌，为保护文物，恢复景观，遂将大佛寺山门按原样搬迁至山顶，并复建了大佛寺大殿、厢房、藏经阁。大佛寺，主要建筑有天王殿、大雄宝殿、观音殿和地藏殿，神像有释迦牟尼、弥勒佛、观世音、地藏王、四大金刚、十八罗汉等。

署名照片均由网络文魁摄影