O atual castelo de La Ferté-Vidame está localizado no local da fortaleza medieval Vendôme (Vidame de Chartres). As majestosas ruínas que você pode descobrir enquanto caminha pelos caminhos sombreados do parque são sem dúvida as mais imponentes e pitorescas de sua época (século XVIII) na França.
Tudo o que resta são as paredes perfuradas por enormes janelas do palácio construído por Jean-Joseph Laborde, um rico banqueiro e financista da época de Luís XV e Luís XVI. Ao adquirir em 1764 os últimos restos de St. Simon (o livro de memórias), ele compra a menina do último, ele puxou para baixo o castelo medieval de reconstruir sobre os fundamentos deste último um enorme palácio de cerca de 150 m de fachada sem contar o retorno de ângulos. Para fazer isso, ele leva os serviços de um renomado arquiteto Antoine Mathieu Carpentier. Além da construção de um castelo de inspiração clássica, o Carpentier também irá propor a disposição dos jardins franceses, dos quais ainda podemos ler os locais. As perspectivas leste e oeste representavam uma distância de cerca de 3 km de uma extremidade dos jardins para a outra.
Pouco antes da Revolução Francesa, em 1784, Jean-Joseph de Laborde deve separar-se de La Ferte-Vidame. De fato, a pedido do rei Luís XVI, ele deve vender o enorme castelo e toda a propriedade ao duque de Bourbon Penthièvre. Por que tal escolha? O Duque de Bourbon Penthièvre, grande filho de Louis XIV e Madame de Montespan, um filho dos bastardos legitimados (o Conde de Toulouse) é um rico fazendeiro que possui os castelos de Eu, Anet Armainvilliers Gisors, Vernon, Amboise e Rambouillet. Tendo, como seu pai, o cargo de Grande Almirante da França e especialmente do Grande Veneur, ele organiza as caçadas de Luís XVI e convida os últimos regularmente para Rambouillet. Luís XVI, que, como seus ancestrais, era apaixonado por caçar, apaixonou-se pela propriedade de Rambouillet e comprou-a de sua prima. O duque de Penthièvre sendo órfão de uma de suas casas adquire a área Jean-Joseph Laborde Percheron de La Ferte-Vidame. A pedido de Luís XVI, o rico banqueiro corre e deixa a sua casa fértil para o castelo de Méréville, em Essonne. Em Méréville, o Laborde empreende um enorme projeto e desenha o mais belo parque inglês que nosso país conhece.
Infelizmente, o duque de Bourbon Penthièvre não terá tempo para desfrutar de sua mais recente aquisição desde que a Revolução Francesa irrompe. Todos os domínios pertencentes à nobreza, neste caso membros da família real, são apreendidos e vendidos como propriedade nacional. La Ferté-Vidame, seu castelo, seu parque e todas as terras são vendidas a Cardot Villiers, promotor de propriedades inescrupulosas que empreende desde 1793 o saque metódico da propriedade e seu imenso palácio.