Entwicklung eines Tests zur Erfassung interkultureller ...

DISKUSSION 83
7.2.5 Die Testkonstruktion
Zur Testkonstruktion des TIHK wurden die Mittelwerte der Probanden über den gesamten
Test berechnet. Da durch die Berechnung von Mittelwerten Informationen verloren gehen,
wäre es im Sinne einer besseren Differenzierungsfähigkeit des Tests im Nachhinein sinnvoller
gewesen, den TIHK anhand einer anderen Maßzahl zu entwickeln. Hier würden sich die
Summenwerte über alle Aufgaben pro Proband anbieten, die auch bei der Interpretation der
Testergebnisse verwendet worden sind (vgl. Kap. 6.5). Auf diese Weise ist eine höhere Varianz
der Testergebnisse zu erwarten, die sich positiv auf die Differenzierungsfähigkeit des
Tests auswirkt. In der vorliegenden Arbeit wurde jedoch auf die Methode der Mittelwerte zurückgegriffen,
um die Probanden auf der verwendeten 4er Skala lokalisieren zu können. Unabhängig
von der inhaltlichen Interpretation wird vorgeschlagen, die Testkonstruktion zukünftig
grundsätzlich an den Gesamtrohwerten vorzunehmen. Dort ist der statistische
Mehrgewinn bedeutsamer als bei der Interpretation der Testergebnisse.
Als weitere methodische Kritik im Rahmen der Testkonstruktion des TIHK sind 2 statistische
Verfahren anzuführen. Zum einen betrifft dies die Vorgehensweise zur Bestimmung der
Schwierigkeitsindices (vgl. Kap. 5.2.1.1). Der gewählten Vorgehensweise zur Bestimmung
der Aufgabenschwierigkeit wurde ein „Richtig-Falsch“-Antwortschema zugrunde gelegt. Pro
Aufgabe gab es eine Antwortalternative mit der richtigen Lösung, die 3 anderen Antworten
wurden mit falsch bewertet. Somit wurde die geforderte Rangreihenbildung der Antworten
(vgl. Kap. 5.2.2.1) wieder außer Kraft gesetzt. Dadurch gingen Informationen über die Güte
des Antwortverhaltens des Probanden verloren, nämlich wie nah der Proband an der richtigen
Lösung der Aufgabe war. Eine Möglichkeit, dem entgegenzuwirken, stellt der plausibilitätskorrigierte
Schwierigkeitsindex von HORST (1971) dar, der die meistfrequentierteste falsche
Antwortalternative zur Berechnung des Schwierigkeitsindex berücksichtigt. Da die
Formel von HORST (1971) jedoch wenig erprobt und damit in der Anwendung zweifelhaft ist,
wurde auf die bewährte Methode zur Berechnung des Schwierigkeitsindex zurückgegriffen.
Das zweite zu kritisierende Vorgehen bei der Konstruktion des TIHK betrifft die Verwendung
de c-Koeffizienten von SIMON ET AL. (in Vorbereitung) (vgl. Kap. 6.2.3.3). Dieser hätte sinnvollerweise
bereits zur Konstruktion von Testform A eingesetzt werden müssen, um einem
einheitlichen methodischen Vorgehen gerecht zu werden und aussagekräftige Ergebnisse zu
gewährleisten. Da die Ergebnisse der Testkonstruktion A allerdings keinen Anlass gaben, die
Methoden der klassischen Testtheorie anzuzweifeln, wurde erst an späterer Stelle (bei der
Konstruktion von Test B) offensichtlich, dass die Verfahren der klassischen Testtheorie im
vorliegenden Fall unzureichend waren (vgl. Kap. 6.2.3.2). Infolgedessen wurde von der Auto-