Baustelle Lehrerbildung - Institut für Unterrichts- und ...

PA 15 Kompetenzerhebungen bei SchülerInnen I
Durchführungseffekte bei Vergleichsarbeiten
Dienstag (6.9.2011), Raum E.2.42, 12:00 Uhr - 12:30 Uhr
Tanja Graf, Rico Emmrich, Peter Harych
Institut für Schulqualität der Länder Berlin und Brandenburg e.V. (ISQ)
tanja.graf@isq-bb.de
Lehreradministrierte Vergleichsarbeiten werden in den Ländern der Bundesrepublik zwar im
Sinne eines low-stake testing arrangiert, dennoch sehen sich Lehrkräfte einem gewissen Erwartungsdruck
seitens der Eltern, Kolleginnen und Kollegen, Schulleitungen und Administrationen
ausgesetzt (Kuper & Hartung, 2007). Vor diesem Hintergrund sind vermehrt Diskussionen um
die prinzipielle Aussagekraft und Vergleichbarkeit der Ergebnisse aufgekommen (Brügelmann,
2005). Abgesehen von Einzelfallberichten gibt es bislang wenig empirische Daten zum Ausmaß
solcher Effekte im Rahmen der Vergleichsarbeiten.
Ausgehend von anderen Studien zu verschiedenen Methoden und (intentionalen) Graden der
Ergebnisbeeinflussung (Amrein-Beardsley et al, 2010) wird mit der vorliegenden Studie versucht,
diesen Durchführungseffekten quantitativ näher zu kommen. Im Zuge der Vergleichsarbeiten
in der 8. Jahrgangsstufe 2011 standen Aspekte der Durchführungs- und Auswertungsobjektivität
des Testverfahrens im Fokus. Es werden die Ergebnisse einer stichprobenbasierten
Studie im Fach Mathematik mit Versandvariation, Testleitereinsatz und externer Auswertung
über geschulte Rater beschrieben.
Das Wissen über Durchführungseffekte bei Vergleichsarbeiten kann dabei einerseits für die Einordnung
von „Verzerrungen“ gegenüber stärker standardisierten Tests (wie Ländervergleiche)
und andererseits für die Abschätzung von Effekten unter spezifischen Durchführungsbedingungen
nützlich sein.
Kuper, H., Hartung, V. (2007). Überzeugungen zur Verwendung des Wissens aus Lernstandserhebungen. Zeitschrift
für Erziehungswissenschaft, 10(2), 214-229.
Brügelmann, H. (2005). Wahrheit durch VERA? Anmerkungen zum ersten Durchgang der landesweiten
Leistungstests in sieben Bundesländern. Grundschule aktuell, 89 (1), 7-9.
Amrein-Beardsley, A., Berliner, D.C. & Rideau, S. (2010). Cheating in the first, second, and third degree: Educators
responses to high-stakes testing. Education policy analysis archives, 18 (14), 2-31.
283
PANELS (PA)