Issards is een land bekend aan het einde van de tiende eeuw en behoren tot de familie van Archambault Souvigny.
Het was een kluit die is uitgegroeid tot het eind van de dertiende eeuw eigendom van de familie van Dreuille nog steeds in de regio bestaande.
Gedurende de 100 jaar oorlog, de heuvel moest worden afgebroken en tussen 1460 en 1510 werd herbouwd het kleine torentje.
Ze werd beschouwd als de koning huis. Ze bleef in dezelfde familie sinds met de opeenvolging van naam verandert.
Op het moment van de zestiende eeuw werd gebouwd het hoofdgebouw.
Tijdens de revolutie van het kasteel behoort tot een jonge dame van Dreuille, echtgenote van graaf Gaulmyn, ze heeft twee zoon.
De graaf en zijn twee zoon ging over immigratie. De graaf stierf in Duitsland en Madame Gaulmyn wordt verbannen naar een woning in locaterie.
Tijdens de revolutie, werd het pand verkocht als nationaal eigendom en de koper niet het pand als een inwoner van Moulins te bezetten.
De oudste zoon, trouwde met de bruidsmeisje Damoiseau, kocht Issards, (zijn broer in een naburig pand wordt geïnstalleerd om Rimasoir). Ze hebben een dochter, die miss Gaulmyn van Louis Gabriel Carre d'Aligny getrouwd.
Het belangrijkste deel van het kasteel werd verwaarloosd onderhoud van bijna 100 jaar, werd de grond gelijk gemaakt in de tijd, en het deel van de negentiende eeuw werd herbouwd tussen 1860 en 1870 door de architect Jean Moreau.
De 70 oorlog stopte de bouwkosten en de ingang boog dat was om een kapel te nemen en een bibliotheek bleef in de staat van de bouw van 1870.