Performanceoptimierung der Datenanalyse in Netzwerkgraphen durch

3. Vorbetrachtungen einer hochperformanten Lösung
Die Dauer einer SQL-Anweisung, die mit einer graphischen Oberfläche an
den SQL-Server gesendet wird, wird meist zusätzlich zum Ergebnis angezeigt.
Im Rahmen dieser Arbeit wurde pgAdmin [27] verwendet, welches nach jeder
Abfrage die benötigte Zeit in Millisekunden anzeigt. Wenn keine graphische
Oberfläche vorhanden ist und die SQL-Abfragen direkt an der Shell an den
SQL-Server gesendet werden, kann die Zeit durch den Linux/Unix Befehl time
gemessen werden. Ein solcher Aufruf könnte beispielsweise wie folgt aussehen:
time echo ’SELECT count(*) FROM links;’ | psql
Diese Zeitmessung umfasst nicht nur die Ausführung der SQL-Anweisung selbst,
sondern auch das Senden der Anweisung an den Server (unter Umständen über
eine Netzwerkverbindung) und die Ausgabe des Ergebnisses. Die Ausgabe des
Ergebnisses auf der Konsole ist sehr langsam und verfälscht die Messung stark.
Wenn also sehr viele Zeilen zurückgegeben werden, ist das gemessene Ergebnis
unbrauchbar. Das einfache Zählen der Zeilen im Ergebnis vermeidet dieses
Problem. So dauert die Ausführung des Befehls:
time echo ’SELECT * FROM links;’ | psql
deutlich länger als der vorher genannte.
Jedoch verbraucht auch das Zählen der Zeilen ein wenig Zeit. Dies kann
vermieden werden, indem das Ergebnis der Abfrage in eine Datei umgeleitet
wird. Dies kann bei großen Dateien zu Problemen führen und hängt von der
Geschwindigkeit der Festplatte ab. Außerdem verwalten verschiedene Dateisystem
große Dateien auf verschiedene Weisen. Auch der Füllstand der Partition
und die Fragmentierung der neuen Datei wirkt sich auf die Zeitmessung aus.
Somit bietet die Umleitung in eine Datei, die nicht in einem Dateisystem auf
einem physikalischen Speicher abgelegt ist, die genaueste Messung. Ein Beispiel
dafür sieht so aus:
time echo ’SELECT * FROM links;’ | psql > /dev/null
Bei der Verwendung einer graphischen Oberfläche ist die Ausgabe von sehr vielen
(> 1000000) Zeilen nicht mehr möglich. Denn dabei wird pro Ergebniszeile,
eine Zeile in einem Listenfeld der verwendeten GUI angelegt. Derartig große
Listenfelder sind nicht vorgesehen. Der Versuch eine solche Ausgabe anzuzeigen
bricht nach mehreren Stunden Ausführungszeit ab (da der Arbeitsspeicher
voll ist) oder dauert aufgrund der Auslagerung von Arbeitsspeicher so lange,
dass die Ausführung nicht effizient möglich ist. Wenn die graphische Benut-
© Andreas Redmer — 29. September 2011 37