据说，最早的张良庙是由张良的10世玄孙汉中王张鲁所建，历经1700年，原址已无从考察.庙台子张良庙是明、清建筑，6大院，有房舍150余间，占地14200平方米，为陕西大型祠庙之一。

  来到山前，青砖砌成的山门,可见上方横刻"汉张留侯祠"5个朱红大字，大门左右刻着一副对联:

博浪一声震天地，

圮桥三进升云霞。

上联指他在博浪沙派人刺杀秦始皇一事,下联指他在圮桥求教黄石公一事.庙门右侧竖一石碑，上旋"紫柏山汉张良留侯辟谷处"。

  入山门，便踏上一木桥，名曰"进履桥"，取张良在圮桥为黄石公捡鞋穿鞋一事。桥上有栏杆和靠椅，桥下流水潺潺。

  越过木桥，便是高大的保安观，入门后，左右有钟、鼓楼，院中央矗立着"灵官殿"，但见八角飞檐，琉璃瓦饰顶，彩绘拱斗屋檐，颇为壮观。殿侧分列"三清殿"、"三官殿"、"三法殿"等配殿。

  从殿侧北面经过厅，便进入大殿所在院落。大殿雄伟庄严，上悬"明哲风高"、 "帝王之师"，殿门有对联:"毕生彪炳功勋启自授书始;历代崇丰烟祀端由辟谷开。"殿内原有张良塑像，文化大革命中被毁掉，现有歌颂德条幅多幅。

  大殿前有拜殿，左右厢房对称而立。院内清幽、古雅。殿堂门楣遍布称颂的匾额，如 "急流勇退"、"机谏得宜"、"智勇深沉".殿堂立柱饰有众多对联，如:"秦世无双国士;汉廷第一名臣，"富贵不淫，有儒者气;淡泊明志，作平地神"。

  院内还有冯玉祥将军所立的石碑:"豪杰今安在，看青山不老，紫柏长存，想那志士名臣，千载空余凭吊处;神仙古来稀，设黄石重逢，赤松再遇，得此洞天福地，一生愿作消遥游。"

  从大殿右侧过西面的"方丈院"，便是"南花园"。园内有水池，池中立有六角"辟谷亭"，靠北为"五云楼"。

  大殿左侧向东为"北花园"。园中古树林立、鲜花放香，园内西北有一六角亭，名曰"拜石亭"，取张良拜黄石山为师之意。亭内嵌有明隆庆五年(公元1571年)作的《怀山歌》石碑一方。

  这是明代礼部尚书文渊阁大学士赵员吉所立。当年他因不满朝廷争权夺利，辞官返蜀，途经此地，感怀作诗。后来文人志士来此，多有和诗留于后世。花园四周为游廊，廊壁布满彩画和碑石。