Apache Paimon

Apache Paimon är ett öppet källkodformat för data lake house som är utformat för hög genomströmning av streaming och effektiv lagring av data lake. Det utvecklades ursprungligen som ett projekt inom Apache Flink-gemenskapen, och har specifikt sitt ursprung hos Alibaba Group som Flink Table Store. Det utformades för att möta behovet av ett streamingdata lake-format som stöder hög hastighet på dataingestion och låga latensfrågor.

Projektet övergick till Apache Software Foundation (ASF) där det genomgick inkubation innan det blev ett Top-Level Project (TLP) i början av 2024. Som ett öppet källkodsprojekt utvecklas och underhålls koden av en global gemenskap av bidragsgivare från olika teknikföretag, inklusive Alibaba, Bilibili, ByteDance och många andra, även om det primära ledarskapet och de arkitektoniska rötterna förblir nära knutna till ingenjörerna som skapade det på Alibaba.

Ägandet av Apache Paimon är icke-kommersiellt, eftersom det tillhör Apache Software Foundation, en ideell enhet baserad i USA. Detta säkerställer att teknologin förblir leverantörsoberoende och tillgänglig för alla utvecklare globalt under Apache License 2.0.