Das im 7. Bezirk von Paris gelegene Herrenhaus von Brienne befindet sich in einem Gebäude aus dem 18. Jahrhundert, das unter Denkmalschutz steht. Der Bau wurde in der ersten Hälfte des achtzehnten Jahrhunderts von François Duret, dem damaligen Präsidenten des Großen Rates, begonnen. Dieser ist bald in Ungnade gezwungen, den im Bau befindlichen Standort zu verkaufen, um eine Situation zu finden.
Das Herrenhaus von Brienne wurde im Laufe der Jahre den Händen übergeben und zu Beginn des 19. Jahrhunderts von Lucien Bonaparte gekauft, der das Interieur verändert. Er verkaufte es einige Jahre später an seine Mutter Letizia und wurde so zum Palast von Madame, der Mutter des Kaisers.
Er war seit 1817 ein gewöhnlicher Wohnsitz des Kriegsministers und des Verteidigungsministers und erlebte große historische Ereignisse wie die Organisation des Sieges des Ersten Weltkrieges durch Clemenceau oder die Leitung der provisorischen Regierung von 1944 durch Charles de Gaulle. Sein Amt wurde seitdem beibehalten.