Hugo van Voorne vermeld in 1108 wordt vaak als Hugo III aangeduid, maar is zeer waarschijnlijk de eerste heerser van Voorne.
Hugo van Voorne is de stamvader van het geslacht. Hij wordt vermeld in een grafelijke oorkonde van 1108. Het stamslot van de familie heeft gelegen in Poortvliet maar werd begin van de 13e eeuw volledig verwoest tijdens de Loonse oorlog. Daarna bouwde de familie de burcht van Voorne. De familie hadden de bezitting over de steden Den Briel, Goedereede en de dorpen, buurtschappen van Oostvoorne, Ouddorp, Rugge, Rockanje, Zwartewaal en Acquoy.