Le château des Barons d’Ezpeleta aurait été construit vers l’an 1000 à l’initiative des Barons d’Ezpeleta. Son histoire est notamment liée à la Baronne Juliana Henriquez, morte sans descendance en 1694. Par testament, elle légua alors le château aux habitants d’Espelette.
Une prospection archéologique menée en 1997 à la périphérie de l’édifice, au moyen de sondages en tranchées, a permis de mettre au jour les vestiges d’une forteresse de la fin du Moyen Âge. Ces traces correspondent à une vaste enceinte flanquée de cinq tours. L’ensemble formait un polygone irrégulier qui, semble-t-il, s’étendait sur tout le quartier. Cette découverte a ainsi révélé une emprise défensive plus importante que ne pouvait le laisser supposer la partie conservée du château.
La tour d’angle a été inscrite à l’inventaire des Monuments historiques en 1937, puis l’ensemble du château en 1993. Le site accueille aujourd’hui des expositions permanentes.