Les vestiges du château Gauthier Giffard correspondent à un château féodal des XIe et XVe siècles, bâti par Gauthier Giffard, compagnon de Guillaume le Conquérant. Aujourd’hui réduit à des ruines, l’édifice possédait autrefois de nombreux bâtiments, comme l’indiquent des archives du XVe siècle.
La cour était alors divisée en deux parties : une cour haute et une cour basse, séparées par un mur. Elle abritait notamment une maison d’habitation, une salle des communs destinée aux repas des domestiques, ainsi que de nombreuses chambres, dont plusieurs se trouvaient au-dessus de l’entrée vers Sainte-Foy. Le château comprenait également une chapelle, une galerie, des prisons et des garde-robes. Au Moyen Âge, ce dernier terme désignait une pièce où se trouvait une chaise percée. Une paneterie, consacrée à la conservation et à la distribution du pain, faisait aussi partie de l’ensemble.
Les murailles étaient surmontées de courtines, sur lesquelles il était possible d’effectuer des rondes. Le site a récemment bénéficié de travaux de consolidation avec technique d’art, de la mise en place d’un cheminement d’accès et d’un déboisement. Un panneau d’interprétation, traduit en anglais, permet de se représenter l’aspect du château au XVe siècle. Des tables de pique-nique, un rucher d’abeilles noires et un verger conservatoire se trouvent également sur place.