Projektgruppe Business Intelligence Applications and Evaluation ...

Projektgruppe Cuberunner
Jinengo – DV Konzept
3.3 Datenflüsse
Die folgenden Datenflüsse dienen der Übertragung von Daten zwischen verschiedenen Datenbanken
und Tabellen. Zum Einsatz sollen dabei jeweils die SQL Server Integration Services (SSIS) kommen,
die integraler Bestandteil des SQL-Servers von Microsoft sind.
Im Folgenden werden die Charakteristika der im Rahmen des Projektes relevanten Integrationsprozesse
beschrieben. Da die Daten im Projekt durch einen Datengenerator künstlich und einmalig erzeugt
werden, ist die regelmäßige Einplanung der einzelnen Prozesse als automatisch ablaufender Job zunächst
nicht von Interesse. Stattdessen ist die manuelle Ausführung der Integrationsprozesse noch
ausreichend. Dies erleichtert auch das Monitoring von Erfolg bzw. Misserfolg der einzelnen Prozessausführungen.
Langfristig ist jedoch insbesondere für den ETL- sowie den Aggregationsprozess eine
Einplanung als automatischer Job von Relevanz 12 .
3.3.1 Prozess zur Füllung der operativen Datenbank mit generierten Daten
Die Füllung der operativen Datenbank erfolgt im Rahmen der Projektarbeit durch generierte Daten
und nicht durch die Interaktion von Endanwendern. Die Stammdaten der operativen Datenbank werden
durch den Datengenerator (siehe Kapitel 4.1) direkt gefüllt. Die verkehrsbezogenen Bewegungsdaten
(Route und Subroute) werden vom Generator hingegen zunächst in die temporären Tabellen
A_SOURCE_Route und A_SOURCE_Subroute gespeichert. Ein Integration-Service muss daher die
folgenden Verarbeitungsschritte durchlaufen:
1. Selektierung aller neu generierten Routendaten (A_SOURCE_Route) und Einfügung dieser in
die operative Datenbanktabelle Route.
2. Selektierung aller zugehörigen Subroutendaten (A_SOURCE_Subroute) und Einfügung dieser
in die operative Datenbanktabelle Subroute.
3. Kennzeichnung der soeben verarbeiteten Routen (Attribut isProcessed in
A_SOURCE_Route), so dass sie beim nächsten Durchlauf nicht erneut berücksichtigt werden.
Der Prozess wird manuell gestartet, da der Datengenerator ebenfalls manuell gestartet wird und daher
nur sporadisch mit neuen Daten zu rechnen ist. Auf längere Sicht sind die Endanwender und nicht
mehr der Datengenerator für die Generierung von Datensätzen zuständig.
12 Die automatische Ausführung von Integrationsprozessen wird vom SQL Server unterstützt und im Rahmen
der Jinengo-Dokumentation auch angeleitet.
65