
Implanté en Arbois depuis 1791, le collège jouxte la porte Picardet, emplacement de l'ancienne herse, qui était une des entrées de la ville et faisait partie des fortifications.
Le jeune louis pasteur y fera ses classes autour des années 1838-1839.
Il réalisa notamment un cadran solaire lorsqu'il était en classe de première.
Plusieurs pièces en métal à l’effigie de pasteur sont visible sur la façade du bâtiment et depuis le rue du collège sur l'arrière de la porte Picardet.