Потребность в предприятии, которое бы серийно производило скульптуру, живописные и мозаичные панно, художественное литье, возникла на фоне провозглашения необходимости объединения архитектуры и всех видов изобразительного искусства в период «освоения классического наследия» — идеологической установки в советской архитектуре, сформировавшейся в начале 1930-х годов.
По заказу кооперативного товарищества «Всекохудожник» в 1933 году архитектор Георгий Гольц спроектировал в селе Всехсвятском корпус зданий в духе ренессанса с галереей-аркадой во внутреннем дворе. Скульптурный корпус Изофабрики был построен в 1936 году. Сегодня он считается единственным по целостности и чистоте стиля образцом советского неоренессанса и признан объектом культурного наследия.
Помимо центрального скульптурного цеха, в состав Изофабрики входили индивидуальные скульптурные и живописные мастерские, мраморно-гранитный корпус, цех росписи тканей, цех игрушки и бронзолитейный цех.
Сегодня рядом с Изофабрикой девелопер FORMA возводится проект SOUL — городской квартал бизнес-класса с большим вниманием к культуре и интеллектуальному созиданию. FORMA бережно отреставрирует Изофабрику, в будущем она войдет в комплексную инфраструктуру проекта: здесь будут функционировать различные творческие и просветительские пространства.