I primi scritti sul castello di Saint-Pierre-des-Champs risalgono alla fine del 900.
Nell'estate del 1210, mentre era diretto all'assedio del castello di Termes, Simon de Monfort, il capo della crociata contro i Catari, prese il castello di Saint-Pierre-des-Champs. Tre catari sono bruciati.
Più tardi, durante la Guerra dei Cent'anni, gli abitanti del villaggio si stabilirono nel castello per proteggersi. Costruiscono le loro casette addossate al bastione e distruggono la casa del signore.
A metà del diciassettesimo secolo, sotto Luigi XIV, questo castello viene tagliato, le sue torri e le sue mura vengono distrutte e due nuove porte sono forate nel muro orientale. Queste porte sono all'origine di due vicoli, uno dei quali è ancora coperto di calade, che si uniscono al portico autentico.
Tra le due guerre, il castello viene abbandonato dalla popolazione.
Agli inizi degli anni '70, parte del bastione sud crolla e il comune colse l'occasione per distruggere anche il bastione sud-est del castello cataro per creare un parcheggio.
