昂布瓦斯城堡始建年份已经不可考究，只知道城堡的雏型可追溯至罗马时代。14世纪起，瓦卢瓦王朝将宫廷迁至卢瓦尔河地区，昂布瓦斯城堡成为了皇室的城堡。瓦卢瓦王朝的查理八世曾下旨扩建城堡，但查理八世年谨28岁便去世，接任的路易十二继位后按查理八世的基础继续整修城堡。其后继位弗朗索瓦一世被喻为文艺复兴的始创人，他聘请了大量的艺术家到法国工作，当中包括著名画家达·芬奇，此时的昂布瓦斯城堡在弗朗索瓦一世下更建宏伟。而达·芬奇死后亦葬于昂布瓦斯城堡的圣·于贝尔小教堂。