De stad dankt zijn naam aan een heuvel (van de Bretoense "nummer" of "zemelen") gewijd aan de grote Welsh St. Dewi (David).
De stad Brandivy kijkt uit over de prachtige vallei van Loc'h. Het wordt bewoond sinds de prehistorie, zoals blijkt uit een groot aantal objecten gevonden bij opgravingen.
Tijdens de Middeleeuwen, is het Loc'h gedomineerd door een aantal feodale terpen. De ruïnes van het kasteel gebouwd in het jaar door de Baron de Mille Lanvaux, een van de oudste baronieën van Groot-Brittannië, blijven dicht bij het meer van het bos.
Tot aan de revolutie, Brandivy hangt County Largoët de Seneschal d'Auray. Ze werd een afzonderlijke parochie na het Concordaat van 1802, en onafhankelijke gezamenlijke 04 juni 1862.