余荫山房有亭、台、楼、阁、堂、轩、桥梁、廊堤、石山、碧水,园林所需的元素全部具备,建筑极具特色。

建成于清同治六年，距今已有140多年的历史了，是岭南园林的代表，与清晖园、可园、梁园一道合称为岭南四大园林   。

余荫山房布局：门口有大牌坊，进去左首为一面湖水，右首一面一字排开的两座大祠堂，分别是余荫山房建造者邬彬的祖父和父亲的祠堂，潜居邬公祠和善言邬公祠。

第一个祠堂进去，是大花园，湖水中有青翠小山与瀑布，水边亭子和阁楼台，围着湖边有走廊和二层楼的厢房。

第二人祠堂进去，主要是子弟读书与主人议事的地方。旁边是后院和太太小姐们的闺范瑜园。

邬彬当年隐居的私家花园就紧挨着祠堂之后旁边，再往最深处走还有邬彬后人建造的瑜园。

余荫山房整座园林布局灵巧精致，以“藏而不露”和“缩龙成寸”的手法，在有限的空间里分别建筑了【深柳堂】、【榄核厅】、【临池别馆】、【玲珑水榭】、【来薰亭】、【孔雀亭】和【廊桥】等。

在面积并不大的山林里，浓缩了园林的主要设施和景致，使有限的空间注入了幽深广阔的无限佳景。 余荫山房园地虽小，但亭桥楼榭，曲径回栏，荷池石山，名花异卉等，一应俱全。

深柳堂是整个园林的主体建筑。余荫山房的造林之妙在于通过回廊、花窗、影壁的巧妙借景,造就了园中有园、景外有景的绝妙效果,使得小小园中的景致更加的深幽广邃。而且在以模仿自然山水为特色的中国古典园林中,融入不少来自西方的建筑元素。中西合璧,共同营造出这方别具特色的岭南佳景,其中“夹墙竹翠”、“虹桥印月”、“深柳藏珍”被称为余荫山房三大奇景。