慕义门坐东北朝西南，硬山顶砖木结构，主体建筑为三进两天井，附有厅堂、厨房各一间，总占地面积约267平方米。大门开在一进左侧，为牌坊式门楼，高3.14米，宽1.63米，拱形大门，门额上有很横排隶书“慕义门”三个大字，门前设有三级台阶。由大门进去是一个狭长的通道，与天井相连，通道右侧为一进的厢房。慕义门的门窗采用坚硬枧木做成，雕纹图案形象逼真，精美雅致。据传，慕义门原屋主姓孙，其先祖系宋时随狄青南征至于扬美而定居于此的。孙氏后人自经商发迹后，建起此宅，宅明乃取自“仰慕道义”之意。