L'Ermitage de Bermont fut fondé certainement au XI e siècle par l'abbaye de Bourgueil du diocèse d'Angers. Il appartenait, toujours vers la fin du XIII siècle, à cette abbaye qui y entretenait un religieux. Elle était à l'origine, dédiée à Notre Dame.
Au pied de l'ermitage se trouve un étang alimenté par la fontaine Saint-Thibaut. Elle rappelle le passage de Saint-Thibaut de provins qui appartenait à la puissante famille des comtes de Champagne. Il abandonne la vie fastueuse de jeune noble pour la vie pauvre de pèlerin et d'ermite qui l'a mené jusqu'en Italie. Cette source était réputée pour guérir les fiévreux.