También conocido como Château des Valois, o Château François I, el Château de Cognac data originalmente del siglo X. Reconstruida en el siglo XII y luego en el XV sobre los restos del primer edificio, todavía hoy revela una fachada sobria e imponente levantada a mediados del siglo XIX. Este último presenta medallones esculpidos, en particular de Francisco I, así como dos salamandras.
El castillo de Cognac está formado por la torre del Conde Jean, del siglo XIII, o la casa del Gobernador con su puerta gótica y su torreón con escalera de caracol. Los visitantes apreciarán la sala del casco con su chimenea monumental o el famoso balcón del rey.