Située à quelques mètres de l'église a probablement été construite au début du XIVe siècle. Ce petit manoir semble avoir été la résidence des prieurs de Saint-Avit-Sénieur. C'est un bâtiment rectangulaire qui s'élève de deux étages à l'ouest et de trois étages à l'est. Sur les deux pignons, on peut voir de beaux exemples de fenêtres.