Optimierung von WWW-Umfragen: Das Online ... - schoolpark.at
Optimierung von WWW-Umfragen: Das Online ... - schoolpark.at
Optimierung von WWW-Umfragen: Das Online ... - schoolpark.at
Erfolgreiche ePaper selbst erstellen
Machen Sie aus Ihren PDF Publikationen ein blätterbares Flipbook mit unserer einzigartigen Google optimierten e-Paper Software.
170 Lorenz Gräf<br />
derlanden wurden eigene Pretest-Labors eingerichtet, um die oft über Dekaden hinweg<br />
unveränderten Erhebungsinstrumente der st<strong>at</strong>istischen Ämter gründlich zu testen<br />
(Bergmann 1995; Akkerboom, Dehue & Snijkers 1996).<br />
In diesen Pretests werden system<strong>at</strong>isch Inform<strong>at</strong>ionen über den Antwortprozeß erhoben.<br />
Der Fragebogen wird in verschiedenen Entwicklungsphasen getestet. Es wird<br />
herausgearbeitet, inwieweit die Fragen verständlich formuliert sind, in welchem Ausmaß<br />
sie die Rückerinnerung unterstützen, wie die Beurteilungsprozesse ablaufen und<br />
ob die Respondenten in der Lage sind, die erinnerte Inform<strong>at</strong>ion in die vorgegebenen<br />
Antworten zu übersetzen. Zu diesem Zweck werden vielfältige Techniken eingesetzt<br />
(expert appraisal, focus group, in-depth interview, cognite interview, current or retrospective<br />
think aloud, probing, confidence r<strong>at</strong>ing). Diese Pretests sind in der Regel sehr<br />
aufwendig. Die D<strong>at</strong>engewinnung setzt besonders geschulte Interviewer voraus. Die Interviews<br />
werden häufig per Audio und Video aufgezeichnet und anschließend gründlich<br />
analysiert. Dieser Aufwand rechtfertigt sich für Grundlagenforschung und für den<br />
Test <strong>von</strong> Instrumenten der sta<strong>at</strong>lichen Ämter, wäre aber für die meisten <strong>WWW</strong>-<strong>Umfragen</strong><br />
unangemessen hoch. Durch Konzentr<strong>at</strong>ion auf die Methoden, die im folgenden<br />
vorgestellt werden, und durch konsequenten Eins<strong>at</strong>z des Internet läßt sich dieser Aufwand<br />
deutlich reduzieren.<br />
Die Methoden im <strong>Online</strong>-Pretest-Studio<br />
Im <strong>Online</strong>-Pretest-Studio setzen wir die Techniken ein, die besonders ergiebig sind<br />
und wenig Aufwand verursachen. Methodisch geschulte Experten beurteilen die eingereichten<br />
Fragebögen, zu besonderen Problemen laden wir Testpersonen in ein PC-<br />
Labor ein, wo sie <strong>Online</strong>-<strong>Umfragen</strong> ausfüllen und anschließend in einer Fokus-Gruppe<br />
über ihre Erfahrungen diskutieren. Ergänzt werden diese D<strong>at</strong>en durch eine besondere<br />
Pretest-Umfrage, an der sich Mitglieder der Zielpopul<strong>at</strong>ion beteiligen.<br />
WebPEP: Webbased Pretest by Expert Panel<br />
Mit Hilfe des Internet ergeben sich neue Möglichkeiten, einen Expertenpretest mit<br />
geografisch verstreut lokalisierten Experten durchzuführen. Der Konzeptfragebogen<br />
wird dazu mit bestimmten Markierungen versehen und paßwortgeschützt im Internet<br />
präsentiert. Seine Internetadresse wird an ausgewählte Personen, die über ein Mindestmaß<br />
an methodischer Kompetenz verfügen, elektronisch versandt. Zugleich werden<br />
Hinweise für die gewünschte Stellungnahme gegeben. Die Experten beurteilen den<br />
Fragebogen <strong>von</strong> ihrem Schreibtisch aus und geben ihre Hinweise online in ein vorbereitetes<br />
Formular ein. Aus den Kommentaren wird eine Synopse erstellt. Die Fehler<br />
werden klassifiziert. Ein Koordin<strong>at</strong>or bereitet die Kommentare auf und erstellt daraus<br />
einen Problembericht, der auch eine Fehlerst<strong>at</strong>istik enthält.<br />
Zur Durchführung des Experten-Pretests haben wir eine eigene Software-Umgebung<br />
geschaffen, die wir WebPEP genannt haben. Mit diesem Tool können die Experten<br />
den <strong>Online</strong>-Fragebogen lokal beurteilen und ihre Anmerkungen an uns zurück-