Le château, originellement construit au xive siècle, fut agrandi au xvie siècle avec deux ailes symétriques. Il fut la propriété, au xviie siècle, de Gabriel Joseph de Lavergne, comte de Guilleragues (1628-1685), diplomate, journaliste et écrivain, auteur des Lettres portugaises.