Katika karne ya 17, Wahindi wenyeji wa Algonquin waligundua visiwa kadhaa huko New York Bay ambavyo havikuzama kabisa katika maji. Ni visiwa vitatu tu vilipewa jina la 'Kisiwa cha Oyster,' kutokana na kiasi cha samaki wa mabomu, besi na oysters waliopatikana ndani ya eneo la ghuba. Visiwa vitatu ambavyo sasa vinajulikana kama Ellis, Uhuru na Black Tom vilipewa jina hilo na walowezi wa New Netherland. Kisiwa hicho kilibaki kuwa chanzo cha usambazaji wa chakula kwa karne tatu zilizofuata.