Ayant acheté l'Hôtel des Gobelins en 1662, Colbert fit immédiatement démarrer l'activité de tissage, aprés avoir récupéré les lissiers des ateliers de Maincy, qui travaillaient pour le Surintendant Fouquet, disgracié en septembre 1661. Des ouvriers des manufactures du Louvre et ceux de Coomans et de La Planche furent également appelés.
En 1664, Colbert est nommé Surintendant des Bâtiments, Arts et Manufactures. C'est de cette année que datent les six portières de la Renommée, aux armes de Colbert, sur le dessin de Le Brun, dont deux viennent d'être déposées par l'Etat au château de Maisons.
La collection personnelle de JB Colbert nous est connue par l'inventaire aprés décès de 1683. Nous savons qu'elle comportait un total de 260 tapisseries, dont 30% de fabrication étrangère, réparties entre son hôtel parisien et le château de Sceaux, qu'il avait fait construire. De cette importante collection, seules, ont survécu, les Chasses de Maximilien et quelques pièces des six portières tissées aux Gobelins.