w26M2

Abbildung 58 zeigt einen Datenfluss der aus mehreren
mappern, reducern und einem join operator besteht.
Diese Datenflüsse erlauben es, mit Stratosphere auch
komplexe Daten-Integrationsaufgabe auszuführen.
Insgesamt sind seit 2008 mehr als 15 Mann-Jahre
Forschung und Entwicklung in das Stratosphere-Open-
Source-System eingeflossen. Stratosphere wird derzeit
von einer aktiven europäischen Open Source Community
weiterentwickelt und wird bereits in mehreren
Anwendungen eingesetzt, zum einen im Kontext von
Verbundprojekten gefördert durch das BMWi, das BMBF
und die EU, zum anderen in direkten Partnerschaften von
Unternehmen mit Stratosphere.
• 6.5 Big Data und Open Source –
Strategische Weichenstellungen
In drei bis fünf Jahren wird ein Großteil aller neuen Daten
nicht in traditionellen, sondern in neuen Speicherlösungen
wie z. B. Hadoop und Object Storage landen. Open-
Source-Lösungen wie Hadoop spielen somit eine wichtige
Rolle im Big-Data-Ökosystem. Für einige Bausteine einer
Big-Data-Lösung sind neben den reinen Open-Source-
Lösungen auch kommerzielle Lösungen am Markt, die auf
Open-Source aufsetzen (vgl. Tabelle 14).
Baustein
Lösungen
Ferner ist das Stratosphere-System Bestandteil des Smart
Data Innovation Lab (www.sdil.de) sowie die strategische
Flaggschiff-Plattform zur Datenanalyse des Europäischen
Instituts für Technologie (EIT). Das Stratosphere-System
ist unter der Apache 2.0 Lizenz verfügbar. 202
Hadoop
ETL & Analytics
Data Visualization
Hortonworks, Cloudera
Talend, Pentaho, Jaspersoft
ggplot2, OpenDX
Tabelle 14: Kommerzielle Lösungen (Auswahl) auf Open-Source-Basis
Bei einem genaueren Blick auf die Chancen und Risiken
von Hadoop wird ersichtlich, dass sich das konsequente
Vertrauen auf Open Source durchaus lohnen kann. So
lässt sich z. B. ein Vendor Lock-In – die zwingende Bindung
an einen Hersteller – verhindern. Zudem läßt sich
wertvoller Spielraum bei Betriebskosten, strategischen
IT-Investitionen und einem Innovationstempo bewahren,
welches in der Regel wesentlich höher ist als bei proprietären
Lösungen. Als historisches Beispiel sei hier Linux
genannt: Nachdem Linux eine kritische Masse erreicht
hatte, war der Fortschritt hier viel rascher als in den von
einzelnen Anbietern kontrollierten Unix-Silos. Der größte
Teil der Arbeit an und um Linux wird weiterhin von der
Nutzergemeinde erledigt. Wer ins Jahr 2014 springt, wird
viele Parallelen zu Hadoop erkennen.
Der genaue Marktanteil der Hadoop- beziehungsweise
Object-Storage-Lösungen lässt sich schwer voraussagen.
Aber kaum ein Experte zweifelt am generellen Trend, dass
202
Weitere Informationen mit Anwendungsbeispielen, umfangreiche Dokumentation und Technologie-Whitepapers, sowie ein Installations-Image für verschiedene
virtuelle Maschinen, der Source-Code des Systems und Kontaktinformationen finden sich unter http://www.stratosphere.eu
134