Connue depuis 1081, la forteresse occupe un site défensif naturel. Le donjon barlong du XIe siècle (tronqué de moitié durant la Fronde), les murs de la grande enceinte et le soubassement de la tour de guet sont du XIe siècle. La porte de la barbacane, dite de l'Audience, a remplacé au XIVe siècle la porte primitive. Le seigneur y exerçait son droit de Haute Justice. La seigneurie fut successivement aux mains des familles de Bourg et d'Albret puis du Chapitre de Saint André. La famille Abadie l'acquiert en 1958, famille dont la généalogie la lie à un certain... Amanieu VII d'Albret, seigneur du château au XIVe siècle.