Амбуаз вошел в историю приблизительно около 503 года, когда у Кловиса, короля франков, произошла встреча с королем вестготов Аларихом на острове Св. Иоанна, расположенном посреди Луары, несколько ниже современного замка. Амбуаз, неоднократно подвергавшийся набегам норманнов, со временем был присоединен к землям Анжуйских графов, затем стал частным владением знаменитой династии Амбуаз-Шомон, а в 1422 году перешел по наследству к Людовику, виконту де Туар. Но по обвинению в участии в заговоре против короля владелец замка был осужден и лишен своего состояния.
