La gente di Vayrac chiamano Vayracoises e Vayracois.
Vayrac ha l'oppidum gallico di Puy Issolud, dove ha avuto luogo la battaglia di Uxellodunum nel 51 aC
Giulio Cesare si è venuto qui per sconfiggere qualche migliaio di ribelli Galli posta Alesia (vedere il museo sulla piazza del municipio).
Durante la seconda guerra mondiale, una serie di opere dal Museo del Louvre sono stati nascosta in un fienile e una casa da Vayrac.
Vayrac si trova nella parte Lotoise della valle della Dordogna, classificata Grande Sito di Midi - Pirenei e Riserva della Biosfera dall'UNESCO.