Jules Hardouin-Mansart, premier architecte du roi Louis XIV, édifia l’Orangerie en 1686 pour le marquis de Seignelay, fils aîné de Colbert. Dès sa création, elle fut jugée tellement belle qu’elle fut détournée de sa fonction et aménagée en galerie d'art. Aujourd'hui, elle conserve les sculptures originales de pierre qui ornaient les jardins d’André Le Nôtre.