Autrefois immergée dans le cours de la rivière, cette modeste construction aurait été construite au 12e s. par les chanoines de la cathédrale pour surveiller le passage d'un gué. Non loin de là, rue du Lot, subsiste un ancien mur défensif.
Ce petit bâtiment en pierre de quatre mètres de hauteur, présente vers l’amont un avant-bec pour résister au courant. Une porte en plein cintre, percée sur le mur ouest à un mètre au dessus du sol actuel, permet de gagner un petit réduit. De l'autre côté de l'immeuble proche de la tour se trouvent les vestiges d'une muraille en brique et pierre munie d'archères, qui semble dater du 15e s.