PDF-Version - freiesMagazin

Python – Teil 10: Kurzer Prozess von Daniel Nögel
Im letzten Teil der Python-Reihe (siehe
freiesMagazin 10/2011 [1]) wurde die
urllib-Bibliothek vorgestellt und damit
ein Client für den FileHoster BayFiles.com
implementiert. In diesem Teil soll
das subprocess-Modul vorgestellt werden,
mit dem sich Prozesse starten, Rückgabewerte
auslesen und Pipes umsetzen lassen.
Besprechung der Übung
Zunächst soll aber die im letzten Teil vorgeschlagene
Aufgabe besprochen werden. Umgesetzt
werden sollte eine Download-Funktion mit Fortschrittsanzeige,
die es auch erlaubt, begonnene
Downloads fortzusetzen.
Eine fertige Beispiellösung findet sich bei
GitHub [2]. Einige Besonderheiten sollen im Folgenden
besprochen werden.
In Zeile 12 wird die Zieldatei im Modus ab geöffnet.
Dies bedeutet, dass die Datei binär geöffnet
wird und neue Daten angehängt werden
(append). Wenn die Zieldatei bereits vorhanden
war (resume in Zeile 11 also den Wert True zugewiesen
bekommen hat), wird in Zeile 15/16 zunächst
die aktuelle Dateigröße ermittelt. Dies wäre
auch mit der Funktion os.path.getsize möglich,
da die Datei hier aber bereits geöffnet vorliegt,
wird mit dem Aufruf fh.seek(0, 2) die Position
auf Byte 0 relativ zum Ende der Datei gesetzt
und die Position (und damit die Größe) mit
fh.tell() ermittelt.
Diese Größenangabe wird in den Zeilen 17/18
genutzt, um einen HTTP-Request zu erzeugen,
der die restliche Datei vom Server anfordert.
Der entsprechende Eintrag im HTTP-Header
lautet dann beispielsweise Range: bytes=100-.
Wenn der Fehler 416 geworfen wird, bedeutet
dies, dass die lokale Datei bereits vollständig ist
und der Server keine weiteren Daten bereit hält.
In diesem Fall gilt der Download als abgeschlossen
(Zeilen 22-25).
In den Zeilen 27-34 wird zunächst die Gesamtlänge
des Downloads ermittelt. Durch die Verwendung
des Range-Headers liefert der Server
auf die Frage nach Content-Length allerdings
lediglich die Restgröße des Downloads zurück,
sodass die Größe der bereits heruntergeladenen
Daten hinzuaddiert werden muss (Zeile 28). Tritt
hierbei ein Fehler auf, wird die Größe pauschal
auf 999999999 Bytes festgelegt. Eine Lösung,
die hier auf Grund der Kürze gewählt wurde.
Schöner wäre es beispielsweise, in diesen Fällen
die Größe auf -1 zu setzen und weiter unten im
Code statt einer Fortschrittsanzeige die Meldung
„Gesamtgröße konnte nicht ermittelt werden“ anzuzeigen.
Der Code-Block in den Zeilen 35-41 wird ausgeführt,
wenn die Zieldatei noch nicht vorhanden
war. Auch hier wird die Download-Größe ermittelt
und im Fehlerfall auf 999999999 gesetzt.
In den Zeilen 43-49 findet der eigentliche Download
statt. Der Ausdruck while content ist so
PROGRAMMIERUNG
lange wahr, wie der Aufruf wh.read(blocksize)
in den Zeilen 43 und 46 Daten vom Server zurückliefert
und an den Namen content bindet.
Die gelesenen Daten werden mit einem Zähler
hochgezählt (Zeile 45) und in die Zieldatei geschrieben
(Zeile 46). In den Zeilen 47 und 48 wird
schließlich – wie schon im letzten Teil dieser Einführung
– eine sehr einfache Fortschrittsanzeige
umgesetzt.
Da nicht jeder Server die Anfrage Content-
Length unterstützt und auch nicht jeder Server
den Range-Header berücksichtigt, bietet dieses
Vorgehen insgesamt durchaus Spielraum für
Fehler und Probleme. Dennoch wird durch das
Skript veranschaulicht, wie man einen derartigen
HTTP-Download mit Fortsetzen-Funktion prinzipiell
umsetzen würde.
subprocess
Das subprocess-Modul [3] ist ein recht mächtiges
Werkzeug rund um das Erzeugen von Prozessen.
Damit lassen sich nicht nur Prozesse
ausführen, sondern auch Rückgabewerte und
Fehler auslesen, Eingaben senden und Pipes erzeugen.
Es stellt damit eine wichtige Alternative
zu der Funktion os.system dar, die von Anfängern
gerne genutzt wird, von der aber sogar in
der offiziellen Python-Dokumentation abgeraten
wird [4].
Statt also beispielsweise einen neuen Tab im
Firefox auf diese Weise zu öffnen
© freiesMagazin CC-BY-SA 3.0 Ausgabe 12/2011 40