Place forte construite vers 1080 sur un point stratégique à 758m d'altitude, le château d'Algues appartenait à la famille de Roquefeuil qui n'y a pas vraiment habité mais l'utilisait comme avant-poste pour surveiller la vallée et l'accès à St-Jean. Cette seigneurie, devenue baronnie et marquisat par la suite, a dominé la région pendant environ 600 ans et certains membres de la famille se sont investi dans le domaine de la religion. En 1574, durant les guerres de religion, les calvinistes st-jeantais trouvent refuge au château d'Algues face à l'attaque menée par les papistes de Nant. En 1629, il fut détruit par le feu sur ordre de Richelieu. Il n'en reste aujourd'hui que des ruines.