Oorspronkelijk Merville ontleent zijn naam aan een Gallo-Romeinse site "de villa van Omer", die in de Middeleeuwen werd vervangen door een versterkt dorp.
Het dorp werd voor het eerst verwoest door de Zwarte Prins in 1359 en vervolgens herbouwd op de plek van het huidige kasteel.
Maar hij werd opnieuw verplaatst in de achttiende. Sterker nog, Henry Augustus Chalvet ROCHEMONTEIX, die een kasteel in Merville in handen, toen besloten om een nieuw huis te bouwen. Hij maakte de mensen verhuizen, raze het dorp en de twee kastelen die er waren en vul de oude gracht! Zo ontstond het kasteel die we vandaag kennen.
