В XVII веке коренные индейцы алгонкины обнаружили в Нью-Йоркском заливе несколько островов, которые не были полностью погружены в воду. Только трем островам было дано название "Устричный остров" из-за большого количества моллюсков, окуней и устриц, водившихся в районе залива. Три острова, известные сегодня как Эллис, Либерти и Блэк Том, получили это название от переселенцев из Новых Нидерландов. Остров оставался источником продовольствия в течение последующих трех столетий.