Het kasteel werd gebouwd door de vorsten van Talmont in de vijftiende eeuw protestantse leider Soubise in beslag genomen het kasteel in 1622 en het had versterkingen gebouwd. Garrison onder Lodewijk XIII, gebombardeerd in 1796 door de Anglo-Nederlandse, door de staat overgenomen in 1835 en gerestaureerd in 1986-1994, het kasteel herbergt nu het Museum van de Zee. Bij een bezoek aan dit museum, kunt u het toren voor een prachtig uitzicht over de stad, de baai van Sables d'Olonne en de omliggende moerassen.
De toren is onderdeel van het verdedigingssysteem van de St. Clair kasteel. De eerste brand (vuurtoren) werd in 1593 geïnstalleerd in de achttiende eeuw het vuur van Vilt is de enige vuurtoren Vendee.