Reconstruit au XVIIIème siècle, sa façade est rythmée par cinq travées soulignées de bandeaux horizontaux filant en dessous des appuis de baies. L’étage noble se distingue par ses hautes portes fenêtres.
Il appartient depuis plus d’un siècle à la famille de Pontac dont le personnage le plus illustre est Arnaud de Pontac, évêque de Bazas de 1572 à 1605. Il consacra une partie de sa fortune à la reconstruction de la Cathédrale (1583-1635) partiellement détruite par les Huguenots au XVIème siècle.