Vraisemblablement composée par l'adjonction successive de 3 corps de bâtiments, la fabrique haute présente aujourd'hui une façade sur cour homogène. Les percements sont disposés suivant une trame particulièrement régulière.

Le rdc partiellement enterré dans le sol, les plafonds voûtés, les murs épais sont caractéristiques des ateliers de moulinage de la soie, et permettent de maintenir une température et une hygrométrie sensiblement constante quelle que soit l'atmosphère extérieure. Le premier étage est divisé en deux appartements. Celui qui était occupé par la famille Crozel est constitué d'une enfilade de pièces aux plafonds moulurés.

Les murs du salon décorés de frises peintes à même le plâtre (probablement au XVIII°s) ont ensuite été recouverts de véritables papiers peints.Le second appartement, plus rustique, servait à loger gardiens et domestiques. Les poinçons des fermes de la charpente des combles ont été sciés pour augmenter les rangées de claies étagées de la magnanerie.

Sur les murs d'une petite pièce aménagée en vestiaire sont accrochées deux séries de portemanteaux numérotés de 1 à 59.