Le pont de bois qui reliait la ville close à la basse-cour du château au XVIIIe siècle disparaît faute d’entretien. La porte
du Pont neuf commande cet accès. Elle est le seul témoin de ce point de passage entre les deux enceintes fortifiées.
Lors de la mise à sac de Vendôme le 19 novembre 1589, c’est par cette porte que s’engouffrent les troupes d’Henri IV
prenant la ville après leur assaut victorieux du château.