Apache Paimon

Apache Paimon est un format de data lake house open-source conçu pour un streaming à haut débit et un stockage efficace des données. Il a été initialement incubé comme un projet au sein de la communauté Apache Flink, émanant spécifiquement du groupe Alibaba sous le nom de Flink Table Store. Il a été conçu pour répondre à la nécessité d'un format de data lake en streaming qui prend en charge l'ingestion de données à grande vitesse et des requêtes à faible latence.

Le projet a été transféré à l'Apache Software Foundation (ASF) où il a subi une incubation avant de devenir un Top-Level Project (TLP) au début de 2024. En tant que projet open-source, son code est développé et maintenu par une communauté mondiale de contributeurs issus de diverses entreprises technologiques, y compris Alibaba, Bilibili, ByteDance, et bien d'autres. Cependant, le leadership principal et les racines architecturales restent étroitement liés aux ingénieurs qui l'ont créé chez Alibaba.

La propriété d'Apache Paimon est non commerciale, car elle appartient à l'Apache Software Foundation, une entité à but non lucratif basée aux États-Unis. Cela garantit que la technologie reste indépendante des fournisseurs et accessible à tous les développeurs du monde entier sous la licence Apache 2.0.