Projektgruppe Business Intelligence Applications and Evaluation ...

Projektbericht Cuberunner
Smart Wind Farm Control – Dokumentation
7. Splittung der finalen Ausgabedatei in 400MB Pakete, um eventuelle Timeouts während des
Imports in SAP HANA zu vermeiden.
Die Realisierung dieser Faktoren hat sich dabei in drei Phasen unterteilt: Der Transformationskette,
die Ausführung aller Transformationen mit Hilfe eines Jobs und die anschließende Zusammenführung
der jeweiligen Dateien.
Pentaho Data Integration CE – Transformationskette
Die realisierte Transformationskette wird in Abbildung 3.4 dargestellt und dessen Vorgänge in Tabelle
3.11 näher erläutert.
474
Abbildung 3.4: Pentaho Data Integration CE - Transformationskette
Vorgang Bezeichnung Funktion Beschreibung
1 Einlesen_...._Txt Text file
input
2 Timestamp 1-5 Get Value
From
Sequence
Einlesen der sechs Textdateien, unter der Verwendung
einer Umgebungsvariablen für die WEA
Nummer. Diese muss bei Aufruf der Transformation
gesetzt werden und vermeidet die jeweilige
Änderung des Dateinamens je Transformation.
Beispiel:
Randomized_${sensor}_a.txt
Inkrementelle Nummerierung der Datensätze mit
einem neuen Timestamp. Dieser dient als Voraussetzung
für die anschließende Zusammenführung.
3 Sortieren 1-5 Sort rows Sortierung der Datensätze, welche von Seiten Pentaho
Data Integration CE verlangt wird um den