La vicomté de Pléhédel est propriété de l'ancienne famille de Boisgelin. Dès le XIIème siècle, les seigneurs de Boisgelin élèvent un château féodal dont un acte en latin de 1298 fait mention "Castellum de Boisgelin". Au XIVème siècle, ils abandonnent cet emplacement pour construire un manoir sur le site actuel.