Situé sur un promontoire au fond de la vallée, ce repaire noble relève de la seigneurie de Beaumont. Bâti par les Anglais au début du XIVe siècle afin de défendre la frontière de la Guyenne contre le Royaume de France, il survit à toutes les guerres.
Par certains aspects, le château peut être considéré comme un château fort : il possède des mâchicoulis un fossé et des meurtrières et arbalétrières disséminées sur les murs. Ces divers éléments servent à la défense du château, qui est abîmé pendant la guerre de Cent ans.