La chapelle du cimetière conserve le souvenir de plusieurs évolutions dans son histoire religieuse. Elle fut autrefois dédiée à Saint Guignefort, avant d’être rebâtie au XIIIe siècle. À cette occasion, ou à la suite de cette reconstruction, elle reçut une nouvelle dédicace et fut placée sous le vocable de Sainte Madeleine. Cette appellation désigne le patronage religieux attaché à l’édifice.
Du XVIIe siècle au XIXe siècle, la chapelle fut le siège de la confrérie des Pénitents bleus. Une confrérie est une association de fidèles réunis autour de pratiques et d’engagements religieux communs. Le terme « pénitents » renvoie à une démarche de dévotion et de pénitence, tandis que la couleur mentionnée dans le nom permettait d’identifier cette communauté. La présence de cette confrérie constitue ainsi un élément important de l’histoire de la chapelle et de son usage religieux au cours de ces siècles.