Del proprio passato, il villaggio di Charroux custodisce ancora un'alta torre ottagonale del XI secolo. Questa torre, detta di Carlomagno, è un vestigio dell'abbazia di Saint-Sauveur. Di questa celebre abbazia benedettina, restano anche il chiostro e la sala capitolare. In quest'ultima si trova un museo che espone sculture gotiche, un tesoro e un plastico dell'abbazia.