Les tours du XVIIe siècle qui marquent l’entrée de la vieille ville et le début de l’ancienne Grand’rue témoignent de l’activité portuaire. Autrefois au nombre de trois, ces imposantes bâtisses servaient à surveiller la rivière et le port. Leur fonction n’a cessé d’évoluer au fil des siècles puisque leur rez-de-chaussée est successivement occupé par des auberges et des demeures de marchands d’huîtres élevées dans les eaux du Jaudy. Les étages abritaient, des greniers à blé et des résidences d’armateurs.