杨溪村的古建筑为典型的清朝建筑风格，20余座保存较好的建筑结构基本一致，以王赐祥家祖屋“贻谷堂”为代表的建筑模式堪称村里古建筑群的代表，其基本结构为“三厅二井”：从大门进去为前厅、天井，两边有厢房，往里是中厅，再进去是“倒天背”的天井和后厅。外墙、屋顶为青砖青瓦，内部为木柱木板。“贻谷堂”的中厅上悬挂着一块朱漆已剥落泛黄的匾额，上书“兄弟登科”四个楷书大字，是当年王聘之、王锡之兄弟俩接连登科所获的牌匾。全村的院落一宅连通一宅，布局巧妙合理，屋墙高深过丈，少窗孔门洞，防盗功能突显。现在绝大多数房子都已经没有人居住，不过都维护得不错，打扫得比较干净，说明老百姓有了较强的保护意识。

      村里以王姓为主，王氏宗祠建于清道光年间，主体建构保存尚好。最难得的是宗祠大门两边的诰封碑。清咸丰五年（公元1855年）十月，朝廷旌表时任四川龙安府彰明县知县的王锡之的祖父和父亲为文林郎，祖母和母亲为七品孺人。碑高约1.8米，宽1米，碑文的上端和周围有花鸟兽云等图案的浮雕，雕刻非常精美。村口高高的贞节牌坊，它的两面分别刻有“一门双节”和“大清敕建”八个楷书大字。据介绍，王锡之的祖父兄弟二人早逝，祖母费氏从19岁守节至73岁，周氏从20岁守节至50多岁亡故，得到朝廷表彰树立牌坊。