De Wintertuin was een ontwerp van Baarnse aannemer en kassenbouwer Gerrit Koelewijn (1854-1925). Hij woonde op Brink 8-10, het vroegere Schoutenhuis. Achter dit pand had hij een flink stuk grond. Vanaf de Brinkstraat was er een achteringang voor transport ongeveer ter hoogte van de Burg. Penstraat. Om precies te zijn bevond de transportingang zich links naast het huidige pand Brinkstraat 25-27. De ingang vormde ook de grens van de grond die tot aan de Kampstraat doorliep. Behalve een smalle woonstrook langs de Brinkstraat, de Brink en het begin van de Eemnesserweg, behoorde alle grond in deze hoek aan de familie Koelewijn.
Op deze grond stonden een grote houtloods, een flinke timmermanswerkplaats met beneden houtbewerkingsmachines en boven werkbanken voor handbewerking. Ook had hij daar een kalkput, een smederij en een kyaniseerinrichting voor het verduurzamen van hout. Kyaniseren is een manier om hout voor bederf te bewaren, door het met een oplossing van sublimaat (kwikzilverchloride) te doortrekken. Een uitvinding van de Engelsman Kyan. De bouw van de prachtige Wintertuin in het Cantonspark hielp Koelewijn aan vele projecten door heel Nederland.