Apache Flink (DACH)

Data-Engineers, Platform- und DevOps-Teams sowie Data-Scientists im DACH-Raum, die Echtzeit-Datenpipelines, Event-Driven Applications oder Stream-&-Batch-Analytics auf Apache Flink betreiben oder einführen wollen. Auch relevant für Architektinnen und Architekten, die Stateful-Computing, Change-Data-Capture (Flink CDC), Machine Learning auf Streams (Flink ML) oder Stateful Functions evaluieren und sich mit Peers zu Operations, Savepoints und Skalierung austauschen möchten.

Apache Flink ist ein verteiltes Framework für zustandsbehaftete Berechnungen auf unbounded und bounded Datenströmen mit Exactly-Once-Semantik, Event-Time-Processing, Late-Data-Handling, Hochverfügbarkeit, Savepoints, Incremental Checkpoints und gestaffelten APIs (SQL, DataStream API, ProcessFunction). Die DACH-Community organisiert sich über Meetups, lokale User Groups, Talks auf der Flink Forward und Beiträge von Committern aus Deutschland, Österreich und der Schweiz. Aktuell sind Flink 2.2 und 1.20 LTS, CDC 3.6, Agents 0.2, ML 2.3 und Stateful Functions 3.3 verfügbar; der offizielle Flink-Blog kündigt Releases und Community-Updates monatlich an.

Apache Flink ist ein Top-Level-Projekt der Apache Software Foundation und wird unter der Apache License v2 entwickelt; die Domain flink.apache.org ist die offizielle Projektseite, flink-packages.org listet Ergänzungen. Das Projekt ist aus dem Forschungsvorhaben Stratosphere an der TU Berlin, HU Berlin und dem Hasso-Plattner-Institut hervorgegangen, bevor es 2014 in die ASF-Inkubation ging und Anfang 2015 Top-Level-Status erreichte. Viele Kern-Committer und PMC-Mitglieder der Region sind im Umfeld von Ververica (früher data Artisans, heute Teil der Alibaba-Gruppe) und großen Anwendern wie ING, Uber oder Bouygues Telecom aktiv.