Chaque premier septembre, une procession avait lieu à une chapelle dédiée à saint Gilles, celui-ci étant censé guérir des fièvres. La chapelle ayant été détruite et profanée, les habitants de Vaugouret décidèrent demporter la statue du saint et de lui construire un oratoire.