Construit à la fin du 13ème siècle, le Comte d’Armagnac le fit couper en 1388 (en même temps que celui d’Espalion) afin d’empêcher le passage des routiers.
Le Pont d’Olt semble avoir davantage souffert des caprices de la rivière que le pont de Truyère. La liste des nombreuses réparations connues dont ce pont a fait l’objet devrait montrer l’importance des reprises de cet édifice. Il aurait été réparé notamment en 1524 et en 1680 (en même temps que le pont de Truyère).