Le bâtiment, sans doute antérieur à 1840, est doté d'une façade, rue des Dauphins, qui présente de grandes fenêtres cintrées encadrées de pierre, typique des ganteries de l’époque. Il abritera successivement la ganterie Rouillon, née au XVIIIe siècle, puis la ganterie Perrin, qui devient au XIXe siècle la plus importante sur la place, avec des usines à Grenoble, La Mure, Mens, Saint-Pierre-de-Chartreuse et même Millau.
Fondé en 1860 par Mme Perrin, l’établissement connaît un essor rapide. En 1873, Valérien Perrin, l'un des fils, crée un magasin chic sur la Quatrième Avenue de New York. De nombreux comptoirs de vente sont ensuite ouverts dans plusieurs pays : Angleterre, Canada, Australie. La maison embauche jusqu’à 6 000 personnes, dont la moitié à Grenoble. Valérien Perrin a habité rue de Turenne dans un castel néogothique en brique de ciment, construit en 1899 par les architectes Chatrousse et Ricoud. L'ancienne ganterie accueille actuellement le lycée Pierre Termier.