Au XVIe siècle, le château de Ségur est le siège d’une seigneurie tenue par le marquis de Trans et se trouve à mi-chemin entre les pays de Gurson et de Montravel.
Au XVIIIe siècle, le château est réaménagé en chartreuse par ses héritiers. Celle-ci se compose alors d’un bâtiment principal de plain-pied côté cour et surélevé sur des caves côté jardin. Sa toiture mansardée laisse dépasser deux pavillons carrés au toit pentu enserrant la cour carrée.
En 1788, le vicomte de Ségur-Montazeau vend la seigneurie à Jacques de La Rivière. Les propriétaires se succèdent alors jusqu’à l’heure actuelle, la demeure appartenant toujours à un particulier.