Construit au XVIème siècle par la famille Hüe de Caligny, le manoir, surnommé "Le Château", s'élevait près de l'église romane, à l'endroit supposé d'un ancien château fort. Abandonné puis détruit au début du XIXème siècle, il en reste aujourd'hui quelques vestiges dont le Monument Portail. Les armoiries qui figuraient sur le fronton auraient été martelées pendant la Révolution.