En 1783, le Marquis de La Fayette conçoit le projet d’acquérir un hôtel particulier pour s’y installer avec sa femme et ses enfants. Il quitte donc l’Hôtel de Noailles, propriété de son beau-père, où il résidait depuis son mariage, et s’établit, jusqu’en 1827, dans l’Hôtel de La Fayette, demeure prestigieuse située 183, rue de Bourbon (actuelle rue de Lille).
Les époux La Fayette y recevront, entre autres personnalités de leur temps, les Américains Benjamin Franklin et Thomas Jefferson.