Vers 1520-1530, le puissant seigneur local Geoffroy de Pérusse, transforme le château de ses ancêtres en résidence fastueuse dans le style Renaissance, ornée de décors sculptés en calcaire. Son petit-fils, François des Cars, poursuit son œuvre dans la deuxième moitié du siècle par des embellissements et surtout par d'importantes fortifications permettant de se protéger des assauts des guerres de religion.
De ce vaste ensemble fortifié subsistent la tour d'artillerie, deux châtelets et les vestiges de la tour principale.
En contrebas, les écuries Renaissance du château arborent encore leurs très belles lucarnes à pilastres et frontons décorés, ainsi qu'une partie des peintures équestres qui ornaient la voûte en berceau brisé du rez-de-chaussée.
