Entwicklung eines Tests zur Erfassung interkultureller ...

DIE METHODE ZUR ENTWICKLUNG DES TIHK 44
tests insofern ein, als für jedes Item aus Test A nur 2 Items für den Paralleltest zur Auswahl
zur Verfügung stehen. Zur Aufgabenpaarung wird demnach in der vorliegenden Arbeit lediglich
zwischen 2 Items entschieden, die dem jeweiligen Item aus Test A bezüglich Schwierigkeit
und Trennschärfe am ehesten entsprechen.
Da bei der Konstruktion von Paralleltests bestimmte Äquivalenzkriterien (vgl. Kap. 5.2.6)
erfüllt sein müssen, findet an dieser Stelle ein weiterer Aspekt bei der Aufgabenpaarung Berücksichtigung.
Um tatsächlich von einer Parallelität der beiden Testformen des TIHK sprechen
zu können, müssen die Skalen A und B gleiche Mittelwerte, Varianzen und Reliabilität
besitzen (vgl. Kap. 5.2.6). Aus diesem Grund werden bei der Parallelskala B verschiedene
Itemkombinationen (Aufgaben aus den Skalen B und C werden unterschiedlich zu einer
Testform B zusammengesetzt) hinsichtlich dieser Äquivalenzkriterien untersucht. Auf diese
Weise soll die Skala generiert werden, die hinsichtlich der Verteilungskennwerte (Mittelwerte,
Varianzen) und der Reliabilität von Test A den höchsten Grad an Äquivalenz aufweist. Dazu
werden für jede dieser Itemkombinationen Mittelwert, Standardabweichung und innere
Konsistenz berechnet und die Skala mit den „besten“ Werten ausgewählt. Unter „beste“
Werte werden die zu Test A gleich hohen Mittelwerte, Varianzen und Realibilitätswerte
verstanden. Das letzte ausschlaggebende Kriterium zur Überprüfung der Äquivalenz der
Testformen ist die Paralleltest-Reliabilität, die Auskunft über die Übereinstimmung der beiden
Skalen gibt.
5.2.6 Die Prüfung der Äquivalenzkriterien von Paralleltests
Bei Paralleltests bzw. Alternativ- oder Äquivalenztests, wie sie auch genannt werden, handelt
es sich nach LIENERT UND RAATZ (1994) um 2 oder mehr gleichwertige Formen ein und desselben
Tests, die wechselseitig austauschbar sind. Mit der Parallelform kann ein und derselbe
Test an ein und demselben Probanden wiederholt werden, was zu Evaluationszwecken
für den Studiengang „Internationale Handlungskompetenz" notwendige Voraussetzung ist.
Um davon ausgehen zu können, dass 2 oder mehrere Testformen gleichwertig sind, müssen
so genannte Äquivalenzkriterien bestimmt werden. Äquivalenzkriterien sind nach LIENERT
UND RAATZ (1994) Kennwerte dafür, dass 2 Paralleltests mit Recht als äquivalent bezeichnet
werden dürfen. Es müssen folgende Punkte überprüft werden:
−
Äquivalenz der Verteilungskennwerte
Die Überprüfung von Mittelwerten und Varianzen der beiden Testformen ist nach
LIENERT UND RAATZ (1994) der Schritt, der bei der Bestimmung der Äquivalenzkriterien
als erstes vorzunehmen ist. Dazu werden die beiden Mittelwerte in üblicher Weise