Construit par Mansart dans la première moitié du XVIIe siècle, l'hôtel a été fortement remanié au XVIIIe siècle. Le corps de bâtiment central, flanqué de deux ailes en retour, donne du côté du quai Malaquais sur une cour d'honneur, de l'autre côté sur un jardin, qui le sépare du Palais des études. Après 1884, il a été presque entièrement évidé pour installer les ateliers de l'École. Seuls les salons du rez-de-chaussée sur le jardin conservent des éléments de décoration datant probablement du Premier Empire.