Apache Iceberg

Apache Iceberg ist ein Open-Source-Tabellenformat mit hoher Leistung für riesige analytische Datensätze. Es wurde ursprünglich bei Netflix entwickelt, um Probleme mit Datenkonsistenz und Leistung in ihrem massiven Data Lake zu lösen, der auf dem Hive-Tabellenformat basiert.

Im Jahr 2018 spendete Netflix das Projekt an die Apache Software Foundation (ASF). Als Open-Source-Projekt unter der Apache-Lizenz wird es von einer globalen Gemeinschaft von Mitwirkenden aus verschiedenen Unternehmen entwickelt, anstatt an einem einzigen Standort gefertigt zu werden. Es wird von einem Project Management Committee (PMC) innerhalb der ASF verwaltet, das sicherstellt, dass keine einzelne Firma die absolute Kontrolle über den Entwicklungsverlauf hat.