En 1826, la société Adam et Compagnie acheta à l'État un ancien hôtel, construit par Le Vau, ayant appartenu à Colbert, puis au régent Philippe d'Orléans. La Caisse de la Dette Publique avait ses locaux dans l'immeuble.
Afin de concurrencer la galerie Vivienne, la société Adam et Compagnie décida de faire construire, au lieu et place de l'hôtel, une galerie tout aussi remarquable que sa voisine.