L’église Saint-Pierre conserve, dans son chœur, la partie la plus ancienne de l’édifice. Celui-ci aurait été bâti vers la fin du XVe siècle ou au début du XVIe siècle. D’après les informations disponibles, ce chœur aurait également servi de chapelle à l’abbaye de Saint-Josse. Cette relation avec l’établissement monastique demeure visible à travers les armes du monastère, ainsi que celles de son abbé Mathieu de La Warenne, encore présentes sur place aujourd’hui.
L’édifice entretient aussi un lien particulier avec la tradition maritime du Montreuillois. Saint-Josse y fait l’objet d’une importante vénération de la part des marins. Cette dévotion explique la présence, sur les murs extérieurs de l’église, de nombreuses immatriculations de bateaux gravées dans la pierre. Ces inscriptions témoignent ainsi de l’attachement des gens de mer à saint Josse et de la place occupée par l’église dans cette pratique locale.