Фабрика была основана московскими купцами Хлудовыми в 1845 году. В 1847 году был построен первый корпус. В 1849 году производилось 60 пудов пряжи. На фабрике работали почти 2000 человек, производство оценивалось в 900 000 рублей в 1840-х, а к 1860 эта сумма составила 2 500 000 рублей. На фабрике было английское оборудование, что сделало её одной из самых современных в губернии. Рабочей силы в первые годы было немного. Горожане считали наёмный труд чем-то постыдным. Для получения рабочих Хлудовы покупают крепостных у местных дворян, что было незаконно (так как Хлудовы не являлись дворянами). Салтыков-Щедрин, вице-губернатор Рязани, на тот момент приезжал в Егорьевск, пытаясь расследовать дело фабрикантов, что ему в итоге не удалось.

В 1880-х был построен корпус с башней с часами, которая является одной из главных достопримечательностей Егорьевска.  В 1893 году были проведены телефон и электрическое освещение.В начале XX века фабрика была крупнейшей в Рязанской Губернии.

В октябре 1991 года стала работать в условиях аренды, а в 1992 было преобразовано в акционерное общество. Часть здания сейчас сдается под аренду. Были проекты по созданию Торгового Центра в здании, но от него отказались. В январе 2009 года завершено переоборудование ткацкого производства с установкой новейшего оборудования фирмы «Picanol». 

Отзывы:
1.    Исторически важное место города Егорьевск. Красивая архитектура, классная башня с часами. Прекрасное место для фотосессии и даже так прогуляться наслаждаясь красотой города.
2.    Если показать кому где это, многие подумают, что в Британии! Молодцы, что поддерживают этот памятник архитектуры в хорошем состоянии. В народе называют Биг Бен.
3.    Маленькая Англия в Подмосковье) Чудесное место Можно гулять, исследовать и устроить фотосессию. Имеются действующие предприятия на территории. Очень красиво.
4.    Ну при СССР была действительно фабрика, где работало полгорода , всем давали квартиры естественно бесплатно , детские лагеря отдыха , санатории и прочие льготы , а сейчас огромная территория где непонятно что производят.