Diplomarbeit - Teresa Merino

Usability-Evaluation der Lernanwendung
achtern der Zeitplan für den Ablauf der Evaluation erläutert. Dieser Zeitplan war flexibel
gestaltet, sodass auf Änderungen noch eingegangen werden konnte. Die Gutachter akzep-
tierten den Zeitplan, woraufhin er unverändert blieb. Anschließend wurde den Gutachtern
der Prototyp der Lernanwendung vorgestellt. Die Anwendung, die Anwendungsumgebung,
sowie die Zielgruppe wurden besonders erläutert. Anschließend wurde an jeden Gutachter
ein Ausdruck des Arbeitsbogens mit dem Hinweis, dass identifizierte Probleme, die gegen
Kriterien verstoßen genau zu beschreiben und zu begründen sind, verteilt. Die einzelnen
Kriterien der Liste wurden den Gutachtern vorgestellt und erläutert. Abschließend bestand
die Möglichkeit, Fragen zu stellen oder Verständnisprobleme anzusprechen.
3. Evaluation
Mit jedem Gutachter wurde die Untersuchung einzeln durchgeführt, um eine gegenseitige
Beeinflussung sowie eine gemeinschaftliche Konzentration auf einzelne Probleme zu vermeiden.
Während der Untersuchung war der Versuchsleiter die ganze Zeit über anwesend.
Der Gutachter hatte die Möglichkeit den Versuchsleiter bei Fragen oder Problemen anzusprechen.
Jeder der Gutachter untersuchte einzeln und selbständig den Prototyp der Lernanwendung
auf der Basis freier Exploration. In einer 10-minütigen Einarbeitungszeit
machte sich der Gutachter mit dem Prototyp der Lernanwendung vertraut. Er konzentrierte
sich auf den Informationsablauf und die Funktionalitäten. Die Heuristiken blieben in dieser
Zeit unbeachtet. Nach der Einarbeitung folgte eine 60-minütige Untersuchungszeit, in der
der Gutachter anhand der festgelegten Kriterien im Arbeitsbogen den Prototyp der Lernanwendung
überprüfte. Dabei ging er die Kriterien einzeln durch. Jedes identifizierte Problem
beschrieb der Gutachter genau und ordnete es dem jeweiligen Kriterium zu. Anschließend
nahm er nach seiner persönlichen Einschätzung eine Bewertung des Problems vor. Er
orientierte sich dabei an der Bewertungsskala im Arbeitsbogen. Zum Schluss notierte der
Gutachter seine Gesamteinschätzung über die Anwendung.
4. Problem-Auswertung in der Gruppe
Nachdem die Untersuchung mit den Gutachtern abgeschlossen war, fand ein erneutes gemeinsames
Treffen aller Gutachter mit dem Versuchsleiter statt. Jeder Gutachter stellte
seine Probleme mit seiner Bewertung der Gruppe vor. In der Gruppe wurde über die identifizierten
Probleme und deren Bewertung diskutiert. Die Einstufung der Probleme erfolgte
anhand der Bewertungsskala nach Nielsen, wobei wurden die Faktoren zur Schwerebewertung
berücksichtigt wurden (siehe Abschnitt 2.4.3). Nach der Findung eines Konsenses
wurden die Probleme mit ihrer Bewertungsstufe in eine vorbereitete Tabelle übertragen.
124