Herunterladen - MDR

392
Martin Hecht, Alexander Roppelt und Thilo Siegle
Testdesigns für den Ländervergleich 2012 erfolgte in mehreren, aufeinander aufbauenden
Schritten. Zunächst wurden Aufgaben zu Aufgabenblöcken gruppiert
und diese dann wiederum zu Testheften zusammengestellt. Die Testhefte lassen
sich fünf verschiedenen Teildesigns zuordnen, deren Erstellung und Ausrichtung
im Folgenden näher erläutert wird.
13.1.1 Gruppierung der Aufgaben zu Aufgabenblöcken
Im ersten Schritt der Erstellung des Testdesigns wurden die einzelnen Aufgaben
Aufgabenblöcken zugeordnet. Eine Aufgabe besteht dabei in der Regel aus
mehreren Teilaufgaben, den sogenannten Items. Jedes Item beziehungsweise
jede Aufgabe kommt nur in einem einzigen Aufgabenblock vor, wobei jeder
Aufgabenblock so viele Aufgaben erhält, dass seine Bearbeitungszeit 20 Minuten
beträgt. Des Weiteren sollte die durchschnittliche Schwierigkeit der einzelnen
Aufgabenblöcke innerhalb eines Teildesigns möglichst konstant sein. Innerhalb
eines Aufgaben blocks hingegen wechseln sich leichte mit schwierigen Items ab,
wobei mehrere Sequenzen von Items mit jeweils steigender Itemschwierigkeit
aneinandergereiht werden, sodass ein sägezahnartiges Muster entsteht. Jeder
Aufgabenblock beinhaltet ausschließlich Aufgaben einer mathematischen Leitidee
beziehungsweise eines naturwissenschaftlichen Fachs und Kompetenzbereichs.
Eine Ausnahme bildet ein Aufgabenblock der Naturwissenschaften mit Aufgaben
des Kompetenzbereichs Fachwissen aller drei Fächer Biologie, Chemie und
Physik. Die Aufgabenblöcke für Schülerinnen und Schüler mit sonderpädagogischem
Förderbedarf bestehen aus leichteren Aufgaben aus der Menge aller
Aufgaben. In Mathematik kamen zusätzlich weitere erprobte Aufgaben zum
Einsatz, die nicht für Schülerinnen und Schüler ohne sonderpädagogischen
Förderbedarf verwendet wurden. Weiterhin war für diese Aufgabenblöcke jeweils
eine zehn Minuten längere Bearbeitungszeit von 30 Minuten vorgesehen.
In Tabelle 13.1 ist die Anzahl der Aufgabenblöcke, Aufgaben und Items für
jede mathematische Leitidee beziehungsweise für jeden naturwissenschaftlichen
Kompetenzbereich dargestellt.
13.1.2 Zusammenstellung von Testheften
Im zweiten Schritt wurden die Aufgabenblöcke zu Testheften zusammengestellt.
Im Ländervergleich 2012 beinhalten die Testhefte je nach Teildesign vier
oder sechs verschiedene Aufgabenblöcke, wobei jedes Testheft innerhalb von
zwei Zeitstunden zu bearbeiten war. Insgesamt kamen fünf Teildesigns zum
Einsatz (siehe Tabelle 13.2). Das erste und zweite Teildesign besteht jeweils aus
31 Testheften mit sechs Aufgabenblockpositionen. Jeder der 31 Aufgabenblöcke
wird jeder Aufgabenblockposition genau einmal zugeordnet. Folglich ist jeder
Aufgabenblock in sechs Testheften vorhanden.
Im Verlauf der Testbearbeitung können Schülerinnen und Schüler ermüden
und in ihrer Motivation nachlassen, was die Ergebnisse statistischer
Analysen beeinflussen kann (z. B. Robitzsch, 2009). Um solche Effekte auszugleichen
und möglichst valide statistische Kennwerte zu erhalten, wurde im
Ländervergleich 2012 im ersten und zweiten Teildesign ein Youden-Square-
Design eingesetzt, das besonders günstige Eigenschaften aufweist. In dieser