Les ruines du château de Saint-Julien-d’Arpaon occupent une falaise qui domine le village éponyme. Les premières mentions de l’édifice dateraient du XIIIe siècle. À cette époque, les seigneurs d’Anduze possédaient la baronnie de Florac ainsi que le château.
En 1618, alors que la famille de Gabriac en était propriétaire, le château fut démantelé. Au XVIIIe siècle, il passa par héritage à la famille de Montcalm, originaire du Rouergue. Celle-ci entreprit de restaurer la bâtisse. Malgré ces travaux, l’édifice subit ensuite les effets du temps et se présente aujourd’hui à l’état de ruines.
Les vestiges permettent encore d’observer plusieurs éléments de l’ancien château, notamment de nombreux arcs en plein cintre, c’est-à-dire des arcs formant une courbe régulière, ainsi qu’une échauguette. Une vaste salle basse couverte par un arc brisé subsiste également. Un pigeonnier a par ailleurs été aménagé directement dans la carcasse du château.
La visite de ces ruines exige une grande prudence. Il est recommandé de ne grimper sur aucun mur et de ne pas courir, en raison du risque important de chute de pierres.