Herunterladen - MDR

Kapitel 13
Testdesign und Auswertung des
Ländervergleichs
Martin Hecht, Alexander Roppelt und Thilo Siegle
In diesem Kapitel werden d ie zentralen methodischen Aspekte der Durchführung
und statistischen Auswertung des IQB-Ländervergleichs 2012 in Mathematik
und in den naturwissenschaftlichen Fächern beschrieben. Das Vorgehen im
Ländervergleich 2012 orientiert sich an bereits bewährten Methoden der vorhergehenden
IQB-Ländervergleichsstudien 2009 und 2011 (Böhme et al., 2010;
Weirich, Haag & Roppelt, 2012) sowie an internationalen Schulleistungsstudien
wie PISA 1 (OECD, 2009, 2012) und PIRLS/IGLU 2 (Tarelli, Wendt, Bos &
Zylowski, 2012). Es wird beschrieben, wie diese Verfahren und Methoden im
Rahmen des Ländervergleichs 2012 konkret umgesetzt und angewendet wurden.
13.1 Testdesign
In der IQB-Ländervergleichsstudie 2012 wird überprüft, inwieweit Schülerinnen
und Schüler die in den Bildungsstandards definierten Kompetenzen im Fach
Mathematik (KMK, 2004; 2005a) und in den naturwissenschaftlichen Fächern
Biologie, Chemie und Physik (KMK, 2005b, 2005c, 2005d) erreichen.
Dabei kommt eine große Anzahl von Aufgaben zum Einsatz, die auf den
Bildungsstandards der jeweiligen Fächer basieren. Im Fach Mathematik erfassen
diese Aufgaben die Kompetenzen von Schülerinnen und Schülern bezogen
auf die fünf inhaltsbezogenen Leitideen Zahl, Messen, Raum und Form, funktionaler
Zusammenhang sowie Daten und Zufall (siehe Kapitel 2.1). In den
Naturwissenschaften werden die beiden Kompetenzbereiche Fachwissen und
Erkenntnisgewinnung in den Fächern Biologie, Chemie und Physik untersucht
(siehe Kapitel 2.2). Die Anzahl der insgesamt eingesetzten Aufgaben ist so groß,
dass eine einzelne Schülerin oder ein einzelner Schüler nicht alle bearbeiten
kann. Vielmehr erhält jeder an der Erhebung Teilnehmende ein Testheft, das nur
eine bestimmte Teilmenge aller Aufgaben enthält. Damit die unterschiedlichen
Teilmengen von Aufgaben bei der Auswertung gut auf einer gemeinsamen Skala
abgebildet und die Leistungen verglichen werden können, sind die Testhefte so
konzipiert, dass jede einzelne Aufgabe in mehreren Testheften vorkommt. Auf
diese Weise werden alle Aufgaben direkt innerhalb eines Testhefts oder indirekt
über mehrere Testhefte hinweg miteinander verbunden. Ein solches komplexes
Testdesign, das auch aus mehreren Teildesigns bestehen kann, wird oft
als Multiple-Matrix-Design bezeichnet (Shoemaker, 1973). Die Erstellung des
1 Das Akronym PISA steht für Programme for International Student Assessment.
2 Das Akronym PIRLS steht für Progress in International Reading Literacy Study; im
deutschen Sprachraum wird diese Studie als Internationale Grundschul-Leseuntersuchung
(IGLU) bezeichnet.