Usability Testing - Theorien, Modelle und Methoden - Institut für ...

Kapitel 3: Methoden der Softwareevaluation
dazu aufgefordert werden, die Aufgaben „so schnell wie möglich“ zu bearbeiten, ohne
ihn explizit auf die Zeitmessung hinzuweisen. Nach erfolgter Zeitmessung sollten die
Messdaten noch um Ausreißer bereinigt werden. Wird der Proband während des Tests
nicht kontrolliert, so kann er entweder die Ausführung einer Aufgabe für die
Mittagspause unterbrechen, was zu ungewöhnlich langen Bearbeitungszeiten führt. Auf
der anderen Seite können Probanden dazu neigen, die Aufgaben nicht sorgfältig zu
bearbeiten, was zu extrem kurzen Bearbeitungszeiten führt. Solche Ausreißer können
mithilfe statistischer Verfahren identifiziert und aussortiert werden.
Zur Analyse der Messdaten kann wiederum für jede gestellte Aufgabe der Mittelwert
der Bearbeitungszeit berechnet werden. Darüber hinaus kann die Bearbeitungszeit in
Intervalle unterteilt werden und es wird die Anzahl bzw. der Anteil an Probanden
dargestellt, die in das entsprechende Intervall fallen. Schließlich ist häufig nur
entscheidend, dass der Nutzer die gestellte Aufgabe innerhalb eines bestimmten
Zeitlimits (z. B. eine Minute) lösen kann. In solchen Fällen ist der Anteil an Probanden,
der diese Grenze nicht überschritten hat, von besonderem Interesse.
Bearbeitungseffizienz
Die Bearbeitungseffizienz kann zwar aus der Bearbeitungsdauer abgeleitet werden, es
ist jedoch vorteilhaft, direkt den Aufwand bestimmen zu können, die zu Lösung der
Aufgabe notwendig ist. Dies ist in den meisten Fällen ebenfalls relativ einfach möglich.
Aufwand besteht für den Nutzer in kognitivem Aufwand einerseits und physischem
Aufwand andererseits. Kognitiver Aufwand kann darin bestehen, den richtigen Link auf
einer Website zu finden oder die nächste notwendige Aktion festzulegen. Physischer
Aufwand besteht z. B. in Mausklicks oder Tastatureingaben. Im einfachsten Fall wird
die Anzahl solcher Aktionen (mithilfe darauf spezialisierter Software) gezählt und
anschließend werden wiederum die Mittelwerte für jede Aufgabe bestimmt. Ein
Vergleich zwischen Aufgaben mit ähnlicher Komplexität kann dabei zu interessanten
Beobachtungen führen.
3.5 Verhaltensmetriken und physiologogische Metriken
Während eines Usability-Tests erfüllt ein Proband in der Regel nicht ausschließlich
seine Aufgaben. Vielmehr gibt er eine Reihe großteils unbewusster Signale von sich,
die für die Usability-Bewertung von großem Interesse sein können. Auf die
20