De verspreiding van de pest bracht de bisschop van Auxerre, heer van de plaats, ertoe de begrafenissen van Varzy met een leprosarium in de 13e eeuw te begiftigen. Bijgebouw van het Hotel-Dieu, het lag op 3 km van de stad, in Vaumorin. Aan het einde van de twaalfde eeuw werd naast de kwaal een kapel gebouwd gewijd aan Sint Lazarus, patroon van melaatsen.
Melaatsheid verdween aan het einde van de vijftiende eeuw en het onderhoud van de kapel is zo goed mogelijk verzekerd door het Hôtel-Dieu van Varzy. Vanaf 1940 werd het proces van desintegratie versterkt. Het dak is gedeeltelijk open, de wanden zijn gestript en het portaal is afgebrokkeld. Koor en schip worden verwoest door de afvalverzamelaars. Gelukkig ondernam de Camosine zijn restauratie van 1977 tot 1982.
