Links - Universität Bielefeld

Di. 11.09.| Postersession | Poster 53 | 10:30 Uhr – 12:30 Uhr | Galerie 1.Stock Halle
Rico Emmrich, Peter Harych, Wolfgang Wendt, Katharina Thoren
Adjustierte Schulleistungsdaten aus Vergleichsarbeiten und Prüfungen in
Berlin – Kritische Prüfung des Modells auf Robustheit
Institut für Schulqualität der Länder Berlin und Brandenburg
Rico.Emmrich@isq-bb.de
Die Ergebnisse aus Vergleichs- und Prüfungsarbeiten hängen zu einem erheblichen Teil mit
Faktoren zusammen, auf die die Schulen keinen oder kaum Einfluss haben. Daher wurden
verschiedene Ansätze entwickelt, um die Zusammensetzung der Schülerschaft hinsichtlich
leistungsrelevanter Kontextmerkmale zu berücksichtigen, also insbesondere bei den
Rückmeldungen an die Schulen die tatsächlich erzielten Rohwerte zu adjustieren, sie also neben
Erwartungswerte zu stellen, um die Ergebnisse angemessen interpretieren zu können.
Ein wichtiges Gütekriterium derartiger Adjustierungsmodelle ergibt sich aus einer Kosten-
Nutzen-Abwägung: Optimal ist danach ein Modell, bei dem der Aufwand der Datenerhebung
möglichst gering und zugleich der Anteil aufgeklärter Leistungsvarianz möglichst groß ist (vgl.
Kuhl u.a. 2011).
Im Posterbeitrag wird ein Adjustierungsmodell von Schulleistungsdaten dargestellt, das in Berlin
bei den Ergebnisrückmeldungen an die Schulen genutzt wird. Es orientiert sich am Hamburger
Ansatz aus KESS (vgl. Pietsch u.a. 2007), ermittelt also "gleitende" Erwartungswerte, d.h. ggf. für
jede Schule einen anderen, der sich als Mittelwert aus den Ergebnissen anderer Schulen ergibt,
die eine ähnliche Zusammensetzung der Schülerschaft aufweisen. Dabei beschränkt sich das
Berliner Adjustierungsmodell auf zwei routinemäßig erfasste Merkmale, um einen Sozialindex zu
bilden: nichtdeutsche Herkunftssprache und Zuzahlungsbefreiung zu Lernmitteln.
Aussagekraft und damit die Legitimität des Verfahrens hängen nicht zuletzt von seiner
Robustheit ab, die u.a. unter folgenden Aspekten untersucht wurde:
- Wie stabil sind die verwendeten Parameter über die Zeit? Wie stabil ist die Position der Schulen
im Sozialranking?
- Wie stark ist die Abhängigkeit des Vergleichswerts von der Anzahl der zu berücksichtigten
Vergleichsschulen? Wie stark wird der Vergleichswert von einzelnen Schulen beeinflusst?
- In welcher Weise verändert sich der Vergleichswert bei der Berücksichtigung der Schulgröße
(Berechnung auf der Basis aller Schüler der Vergleichsschulen vs. Mittelung der Werte auf
Schulebene)?
Kuhl, P., Lenkeit, J., Wendt, W. & Pant, H. A. (2011). Die Kontextuierung von Leistungswerten bei Vergleichs- und
Prüfungsarbeiten: Verschiedene Wege, die Zusammensetzung der Schülerschaft in den Rückmeldungen an
Schulen und die Schulinspektion zu berücksichtigen. In S. Müller, M. Pietsch & W. Bos (Hrsg.). Schulinspektionen
in Deutschland - eine erste empirische Zwischenbilanz (S. 237 – 259). Münster: Waxmann.
Pietsch, M., Bonsen, M., Bos, W. (2007): Ein Index sozialer Belastung als Grundlage für die Rückmeldung 'faier
Vergleiche' von Grundschulen in Hamburg. In: Pietsch, M., Bos, W. (Hrsg.): KESS 4 - Kompetenzen und Einstellungen
von Schülerinnen und Schülern am Ende der Jahrgangsstufe 4 in Hamburger Grundschulen. Münster:
Waxmann.
240