Herunterladen - MDR

Anlage und Durchführung des Ländervergleichs 107
Testhefte
Im nächsten Schritt der Testzusammenstellung werden die Blöcke zu vollständigen
Testheften kombiniert. Dabei soll vermieden werden, dass die Reihenfolge,
in der die Blöcke bearbeitet werden, zu Verzerrungen bei der Schätzung der
Personenfähigkeiten führen. Da im Verlauf der zweistündigen Leistungstestung
die Konzentration, Anstrengungsbereitschaft und Motivation der Schülerinnen
und Schüler sinkt, werden Items, die eine Position am Ende des Testhefts einnehmen,
seltener gelöst als Items zu Beginn des Testheftes (Le, 2007; Robitzsch,
2009). Solche Ermüdungseffekte werden durch Variation der Blockpositionen
ausgeglichen.
Für den Ländervergleich 2012 wurde ein Youden-Square-Design gewählt,
in dem jeder Block mit jedem anderen Block in genau einem Testheft zusammen
dargeboten wurde und jeder Block an jeder Position genau einmal auftrat
(Frey, Hartig & Rupp, 2009). Dieses Testdesign gilt als besonders effizient.
Für das Fach Mathematik einerseits und für die naturwissenschaftlichen Fächer
andererseits wurden in zwei separaten Youden-Squares jeweils 31 Blöcke in
31 Testheften zusammengestellt. Jedes Testheft enthält sechs Blöcke mit einer
Bearbeitungszeit von je 20 Minuten; die Bearbeitungszeit für jedes Testheft beträgt
damit insgesamt zwei Stunden. Tabelle 4.2 illustriert mit einem Ausschnitt
aus dem Youden-Square für die Naturwissenschaften das Prinzip. Abgebildet
werden alle sechs Testhefte, die den ersten Block mit Aufgaben zum Umgang mit
Fachwissen im Fach Physik enthalten („PhyFw01“). Der Block nimmt jede der
sechs möglichen Positionen genau einmal ein und wird mit jedem der verbleibenden
30 Blöcke genau einmal kombiniert.
T abelle 4.2:
Ausschnitt aus dem Youden-Square-Testdesign
Testheftnummer
Block 1 Block 2 Block 3 Block 4 Block 5 Block 6
1 BioFw01 PhyFw01 PhyEg02 PhyFw04 BioFw02 CheEg03
5 PhyFw01 CheFw02 CheEg01 CheFw05 PhyFw05 NawFw01
10 CheEg04 BioEg03 BioFw04 BioEg01 CheEg05 PhyFw01
12 PhyFw02 CheFw03 CheEg02 CheFw01 PhyFw01 BioEg02
13 BioFw05 PhyFw03 PhyEg01 PhyFw01 PhyEg04 BioFw03
26 BioEg05 PhyEg05 PhyFw01 PhyEg03 BioEg04 CheFw04
Anmerkungen. Abgebildet ist exemplarisch die Zusammenstellung aller Testhefte, die den Aufgabenblock PhyFw01 enthalten,
dieser ist fett hervorgehoben. Die Bezeichnung der Aufgabenblöcke setzt sich zusammen aus einem Kürzel für das zu testende
Fach (Bio = Biologie, Che = Chemie, Phy = Physik, Naw = Naturwissenschaften kombiniert), einem Kürzel für den operationalisierten
Kompetenzbereich (Fw = Fachwissen, Eg = Erkenntnisgewinnung) und einer laufenden Nummer.
Um Zusammenhänge zwischen den erfassten Kompetenzen im Fach Mathematik
und in den naturwissenschaftlichen Fächern abbilden zu können, wurden 12 der
31 Blöcke mit Mathematikaufgaben und 12 der 31 Blöcke mit Aufgaben der naturwissenschaftlichen
Fächer in acht weiteren Testheften kombiniert. In vier der
kombinierten Testhefte folgten auf drei Mathematikblöcke drei Blöcke aus den
Naturwissenschaften, die anderen vier Testhefte begannen mit einem naturwissenschaftlichen
Teil und endeten mit einem mathematischen Teil.