Également connu comme le château Louis XI, le château de La Côte-Saint-André est un ancien édifice médiéval érigé au XIIIe siècle. Transformé en château de plaisance au XIXe siècle pour une congrégation religieuse, il bénéficie d'un classement partiel aux Monuments Historiques.
Situé en plein cœur de la commune, le château de La Côte-Saint-André domine l'ensemble du bourg central. Il se présente aujourd'hui sous la forme d'un grand bâtiment flanqué d'une annexe au nord. Dans la cour intérieure se dresse un dôme requalifié en auditorium.
À l'intérieur, il est possible de découvrir une grande salle avec une cheminée monumentale et des plafonds à la française, ainsi qu'un escalier d'honneur avec rampe à balustre. Le site accueille chaque année le festival Berlioz. Il abritait également jusqu'en 2019 le musée du Paradis du Chocolat.