Le nom de la commune provient de Pont doré, sans doute en raison de la couleur de la pierre de construction du pont.
À la fin du XIIIe siècle, une commanderie est fondée par les moines anachorètes de l'ordre de Saint Antoine, les Antonins, sur la voie limousine du pèlerinage de Saint-Jacques-de-Compostelle. Cette commanderie fortifiée comporte une église conventuelle et un moulin et est située à proximité du pont péager qui franchit la Bassanne. L'ensemble devient, par la suite, propriété de l'ordre de Malte puis, à la Révolution, la commanderie et le moulin sont vendus comme biens nationaux, l'église restant propriété de l'état et donc de la commune.
