苏二村原名荔枝村，荔枝树很多。北宋大文豪苏东坡很喜欢吃荔枝，留有“日啖荔枝三百颗，不辞长作岭南人”的佳句。他当年从惠州被贬海南，途经遂溪南北要塞“三十里官路”时，便慕名走进荔枝村，可惜荔枝成熟的季节已过。村里的长老告诉他，“要尝荔枝佳果味，待到来年五月时”。
    后来，苏东坡先生遇赦北归，经过遂溪时正逢五月，他再次踏进荔枝村，这时村里的长老便捧出味道最美的荔枝王——“双袋子”来招待他，他终于如愿以偿。村民为了纪念苏东坡两次踏进荔枝村，便把荔枝村改名为苏二村，意即“苏东坡二进荔枝村”。

    建于清朝年间的苏二村的古民居建筑群，是广东西部地区保存较好的古建筑之一。全村一共有40多幢明清时代的古民居。村东一条溪流从北向南流过，村落以一条纵向的主道和多条横向的巷街为主要骨架，构成东向为主、向南北延伸的村落街巷系统。

    清朝粤西状元林绍棠也曾到苏二村，村里还流传着“状元拜猪槽”的历史故事。原解放军政治部联络部部长叶选宁中将，亲自为苏二村文化宫题字，现是村的文化娱乐中心。