Alfons Ballweg, Kleiderfabrik