De Bruijn Tuin, Renovatie, Bouw