Testbesprechung - Testzentrale

Die Auswertung erfolgt mittels Schablonen. Die Items
werden dichotom bewertet mit Ausnahme des Subtests
Sachaufgaben aus dem DEMAT 2+, bei dem für den korrekten
Rechenweg ein halber Punkt vergeben wird.
Die Normentabellen des DEMAT 2+ liefern nach Klassenstufen
und Geschlecht getrennt Prozentränge für jeden
Subtest sowie Prozentränge, Prozentrangbänder,
T-Werte und T-Wertbänder für den Gesamtwert. Das
Handbuch des DEMAT 3+ enthält zusätzlich T-Werte und
T-Wertbänder auch für die Subtests. Darüber hinaus werden
für die Aufgabentypen, die Subtests und den Gesamtwert
Klassennormen (in Prozenträngen) ausgewiesen.
Testanalyse und Normierung
Die wörtlich festgelegten Testinstruktionen, die Auswertung
mittels Schablonen und die Hinweise in den Handbüchern
zur Interpretation der Normwerte gewährleisten
sowohl im DEMAT 2+ als auch im DEMAT 3+ eine ausreichende
Durchführungs-, Auswertungs- und Interpretationsobjektivität.
Die Items des DEMAT 2+ weisen mit Ausnahme des
Subtests Geometrie zufrieden stellende Trennschärfekoeffizienten
von über .30 auf. Im DEMAT 3+ liegen die
Trennschärfen der Subtests Arithmetik und Sachrechnen
ebenfalls großteils über .30, niedrigere Trennschärfen erreichen
in diesen Subtests nur sehr schwierige oder sehr
leichte Items. Unzureichende Trennschärfen sind dagegen
auch hier für die Items des Subtests Geometrie ausgewiesen.
Beide Testverfahren verfügen über gute Reliabilitäten
für den Gesamtscore (DEMAT 2+: .91–.95; DEMAT 3+:
.81–.86). Geringer fallen die Reliabilitäten der Subtests aus.
Die Schätzungen der inneren Konsistenz reichen im
DEMAT 2+ von .51 (Sachaufgaben) bis .87 (Verdoppeln).
Im DEMAT 3+ fällt vor allem der Subtest Geometrie durch
sehr niedrige Reliabilitätskoeffizienten (.48–.57) auf. Die
innere Konsistenz des Subtests Sachrechnen beträgt je
nach Teilstichprobe .57–.67, die des Subtests Arithmetik
.76–.79.
Neben der Überprüfung der klassischen Testkennwerte
legen Roick et al. (2004) dem DEMAT 3+ auch das dichotom-logistische
Testmodell nach Rasch zu Grunde.
Dieses gilt für den Gesamtwert und alle Subtests mit Ausnahme
des Subtests Sachrechnen, für den eine Zweiklassenlösung
angemessener wäre. Da die graphische Modellprüfung
aber keine allzu großen Abweichungen der
Itemparameter ergibt, halten die Testautoren auch für diesen
Subtest „aus Gründen der Einfachheit und der Praktikabilität
des Tests an der Eindimensionalität der drei Subskalen
im Sinne des dichotom-logistischen Testmodells
nach Rasch“ (Roick et al., 2004, S. 33) fest.
Beide Verfahren beanspruchen Lehrplanvalidität. Sie
weisen einen mittleren Zusammenhang mit der Note im
Fach Mathematik auf (DEMAT 2+: .66; DEMAT 3+: .61).
Testbesprechung
111
Die kriteriumsorientierte Validität wurde darüber hinaus
anhand eines informellen Mathematiktests (Rechenhefte,
Grube et al., 2002) ermittelt: Sie beträgt für den DEMAT 2+
.66, für den DEMAT 3+ .42. Der DEMAT 3+ korreliert mit
einer in Baden-Württemberg landesweit durchgeführten
Vergleichsarbeit in Mathematik zu .71. Zur Schätzung
der prognostischen Validität geben die AutorInnen des
DEMAT 2+ Korrelationen mit der Mathematiknote Ende
der dritten Klasse (.65) und Ende der vierten Klasse (.64),
sowie mit dem DEMAT 3+ (.65) und dem in Vorbereitung
befindlichen DEMAT 4+ (.63) an.
Ähnlich zufrieden stellend sind die Angaben zur prognostischen
Validität des DEMAT 3+: Die Korrelation zur
Schulnote im Fach Mathematik Ende der vierten Klasse
beträgt .68, mit der Empfehlung für die weitere Beschulung
.60 und mit dem DEMAT 4+ .68. Das Handbuch des
DEMAT 3+ beschreibt eine Faktorenanalyse zur Ermittlung
der strukturellen Validität des Verfahrens mit einer
9-Faktorenlösung, die erstaunlich gut die Aufgabentypen
reproduziert.
Die Eichstichprobe des DEMAT 2+ umfasst insgesamt
4014 Kinder aus allen deutschen Bundesländern, darunter
2298 ZweitklässlerInnen und 1716 DrittklässlerInnen.
Während die Verteilung der Kinder auf die einzelnen Bundesländer
im Handbuch ausführlich dargestellt ist, fehlen
Hinweise auf die Geschlechterverteilung. Die Normierungsstichprobe
des DEMAT 3+ enthält Daten von 4209
Kindern, 48,3% davon sind Mädchen. Wiederum ist die
Verteilung der SchülerInnen nach Bundesland und Klassenstufe
aufgeschlüsselt (2012 DrittklässlerInnen, 2197
ViertklässlerInnen). Den Klassennormen liegen Testergebnisse
von 242 Klassen aus dem gesamten Bundesgebiet
zu Grunde.
Plus/Minus
Mit dem DEMAT 2+ und dem DEMAT 3+ liegen zwei profund
konstruierte Ergänzungen zum DEMAT 1+ vor, die
eine ökonomische, objektive, reliable und curricular valide
Diagnose der Mathematikleistungen deutscher SchülerInnen
von der ersten bis zur dritten Schulstufe ermöglichen.
Obwohl die Testverfahren für die einzelnen Schulstufen
von unterschiedlich zusammengesetzten AutorInnenteams
entwickelt wurden, ist es gelungen, eine hohe Kontinuität
beim Testaufbau zu erzielen. Beide Verfahren beeindrucken
vor allem durch die empirischen Belege ihrer
Validität, die zeigen, dass mathematische und nicht generell
intellektuelle Leistungsfähigkeit mit den Testverfahren
überprüft wird. Berücksichtigt man die große Bedeutung
des mathematischen Vorwissens für die Bewältigung
späterer Anforderungen im Fach Mathematik, so kommt
einer möglichst frühen Identifikation von SchülerInnen mit
Rechenschwäche, aber auch Schulklassen mit unzureichendem
Mathematikunterricht eine hohe praktische Bedeutung
zu.
Neben diesen Vorzügen fallen nur einige wenige Punkte
kritisch auf. So ist etwa nicht verständlich, warum der