Inicialmente, Gilles es una villa romana, una sencilla finca rural. Su nombre era Guill, luego Guilles, pero su etimología sigue siendo incierta.
Bajo los merovingios, Gilles pertenece al dominio real. Hacia el año 700, el rey cedió Gilles y dos molinos (l'Etang y La Boissière) a la abadía benedictina de Saint Germain des Prés. En 828, el políptico Irminion, escrito por un abad de Saint Germain des Prés, recapitula las propiedades de la orden.
En 1099, los señores del barrio, incluido el de Ivry, participaron en la toma de Jerusalén. Al regreso, algunos templarios se instalan en la casa conocida como Guillaume (3 bis Grande rue). La Costa de los Templarios es sin duda su recuerdo…
Alrededor del año 1100, el señor de La Boissière luchó contra otros 3 señores de Gilles. 4 señoras luego compartieron Gilles: Vitré, La Boissière, Les Mazis y Jolivet.