TU Berlin

Fachgebiet Datenbanksysteme und InformationsmanagementFlink jetzt Apache Top-Level Projekt

Logo FG DIMA-new  65px

Inhalt

zur Navigation

Flink ist nun Top-Level Projekt!

Lupe

ApacheTM FlinkTM: Ein verteiltes Open-Source „Big Data“ System zur expressiven, deklarativen und effizienten Analyse von Massendaten und Datenströmen

Am 12. Januar 2015 kündigte die Apache Software Foundation (ASF) an, dass Apache FlinkTM (eine verteilte Open-Source Datenanalyseplattform für die Verarbeitung von Datenströmen und  Massendaten) vom Apache Incubator zum Top-Level Projekt (TLP) aufgestiegen ist. Apache Flink ist aus dem seit 2009 von der DFG (Deutsche Forschungsgemeinschaft) geförderten und den EIT ICT Labs unterstützen Forschungsprojekt „Stratosphere“ hervorgegangen. Die Forschungs- und Entwicklungsarbeiten in „Stratosphere“ wurden unter der Federführung von Prof. Volker Markl, Leiter des Fachgebietes Datenbanksysteme und Informationsmanagement an der TU Berlin und Direktor der Forschungsgruppe „Intelligente Analytik für Massendaten“ am Deutschen Forschungszentrum für Künstliche Intelligenz (DFKI), in Zusammenarbeit mit der Technischen Universität Berlin (TUB), der Humboldt-Universität zu Berlin (HU) und dem Hasso Plattner Institut (HPI), sowie weiteren europäischen Partnern vorangetrieben. Die Zusammenarbeit ermöglichte die Entwicklung eines neuartigen datenbanktechnologie-basierten Analysesystems für „Big Data“. Dieses Datenanalysesystem kann insbesondere die Anforderungen des maschinellen Lernens auf großen Datenmengen effizienter und kostengünstiger verarbeiten als existierende Technologien, durch den Einsatz von neuartigen Methoden des skalierbaren Datenmanagements zur parallelen Verarbeitung sowie durch neuartige Methoden der künstlichen Intelligenz zur Anfrageoptimierung. Der Erfolg ermutigte einige DIMA Forscher, das Open-Source Projekt „Apache Flink“ zu starten und das Berliner Start-Up „DataArtisans“ zu gründen. Das Unternehmen hat sich zum Ziel gesetzt, sowohl für das Wachstum der Codebasis von Flink als auch der Anwendergemeinde zu sorgen und gleichzeitig sicherzustellen, dass Flink zu 100% als Open-Source Software frei verfügbar ist. Diese Erfolgsgeschichte ist darüber hinaus ein Zeichen für den Innovationsgeist der Forschungsgruppe. Apache Flink ist ebenfalls die Basistechnologie für die Forschungs- und Entwicklungsarbeit des Berlin Big Data Centers (BBDC), welches zum Ziel hat, die „Data Scientists“ von Morgen auszubilden und Lösungen zu entwickeln, welche die tiefe Analyse von heterogenen Massendaten und Datenströmen weiter verbessern.

 

Die offizielle ASF Presse Meldung:  s.apache.org/YrZ

Mehr Informationen zu ApacheTM FlinkTMflink.apache.org

Mehr Informationen zu dataArtisansdata-artisans.com

Ein Interview mit den früheren DIMA Mitarbeitern und dataArtisans Gründern:  sdtimes.com/inside-apache-software-foundations-newest-top-level-project-apache-flink

Mehr Informationen zum DFKIwww.dfki.de

Mehr Informationen zum BBDC:  bbdc.berlin

 

 

Navigation

Direktzugang

Schnellnavigation zur Seite über Nummerneingabe