Construit par le père du chevalier d'Éon, célèbre diplomate et principal membre du "Secret du Roi" Louis XV, ce bâtiment date du début du XVIIIe siècle.
Avec ses dépendances, la propriété s'étend jusqu'aux rives de l'Armançon. C'est dans son grand salon du rez-de-chaussée ou dans sa salle à manger d'été que le chevalier (ou chevalière entre 1779 et 1786) recevait, avec sa cave réputée, ses hôtes illustres, servis par quatre domestiques.
Cet hôtel construit en 1661 sur un terrain acheté par son aïeul, Jean Luyt, est resté dans la famille jusqu'en 1992. Il a été racheté par Philippe Luyt pour créer le Musée du chevalier d'Éon et présente tous les souvenirs de famille qu'il a réunis depuis 60 ans.
La visite guidée est ainsi faite par ce dernier, le propriétaire des lieux, passionné à souhait. La collection de plus de 200 pièces va des épées du chevalier à ses jupons.