Construit entre 1863 et 1866, sur l'emplacement du Chenil du Roi, pour abriter la préfecture de Seine-et-Oise, il fut occupé par le roi de Prusse lors de la guerre de 1870, puis par les premiers présidents de la IIIe République : Thiers, Mac-Mahon et Jules Grévy et ne redevint préfecture qu’en 1880.