Witte van Haemstede werd ca. 1281 als bastaardzoon geboren uit een verhouding tussen Floris V en Aleid van Heusden, dochter van Jan II van Heusden. Hij overleed in 1321. Het kerkelijk recht bepaalde dat buitenechtelijke kinderen niet konden worden erkend. Witte groeide op als de Witte van Heusden. Maar toen zijn vader in 1296 werd vermoord, kreeg hij van zijn halfbroer Jan I, die Floris V als graaf van Holland was opgevolgd, de heerlijkheid Haemstede in leen. Vanaf die tijd werd hij de Witte van Haemstede genoemd. Sommige bronnen noemen hem ook wel Witte van Holland, maar die benaming was niet correct. Haamstede ligt op het eiland Schouwen-Duiveland in het vroegere graafschap Zeeland. In 1299 nam hij deel aan het beleg van Dordrecht, waarbij hij het kasteel van Putten bezette.