Construit en 1707 par J.-B. Le Blond pour le chanoine de la Porte, l’hôtel, loué à la duchesse de Vendôme, est remanié par son auteur en 1715-1716 : il modifie la façade sur le jardin et crée un nouvel avant-corps qui reçoit le fronton de l’ancien. Après les confiscations révolutionnaires, l’hôtel, qui abrite depuis 1815 l’Ecole des Mines fondée en 1783, est racheté par l’Etat. De 1840 à 1852, l’architecte Duquesney transforme considérablement les lieux en les agrandissant. Le grand escalier est décoré de peintures en 1854 par Hugard et en 1856 par Pujol. Entre 1861 et 1866, Vallez aménage quatre ailes autour d’une cour centrale couverte. Au XXe siècle, d’autres travaux ont achevé l’adaptation des bâtiments qui abritent un important musée de minéralogie.