PISA 2006 Technischer Bericht - Bifie

in den Computer eingegeben werden kann. Die komplexen Multiple-Choice-Items stellen eine erweiterte
Form der Multiple-Choice-Fragen dar, bei denen aus einer Serie von Ja/Nein- oder Richtig/Falsch-
Antworten die jeweils richtige ausgewählt werden muss.
Geschlossene Aufgaben
Mit Hilfe des geschlossenen Aufgabenformats können komplexere Prozesse kontrolliert erfasst werden.
Die Schüler/innen müssen selbst eine Antwort notieren, die meist aus einem Wort oder einer Zahl besteht,
die direkt dem Text oder einer Tabelle entnommen werden kann. Vom Prinzip her ist dieser Aufgabentyp
mit Multiple-Choice-Aufgaben vergleichbar, hat aber den Vorteil, dass Raten weniger leicht möglich ist.
Weiters können auch hier die Antworten relativ leicht als richtig oder falsch beurteilt werden.
Offene Aufgaben
Bei diesem Aufgabentyp müssen die Schüler/innen selbst eine Antwort entwickeln, wobei zwischen
langen und kurzen offenen Aufgaben unterschieden wird. Bei der kurzen Version müssen die
Schüler/innen ein numerisches Ergebnis, einen richtigen Namen oder die Klassifikation für eine Gruppe
von Objekten (o. ä.) darstellen und erläutern. Bei langen offenen Aufgaben werden die Schüler/innen
aufgefordert, auch den Lösungsweg vollständig zu beschreiben oder zu begründen. Dadurch kann erfasst
werden, was Schüler/innen auf Basis ihres
eigenen Verständnisses bei einer Aufgabe produzieren
können. Die Antworten auf die offenen
8 % 8 %
31 %
21 %
Aufgaben erfordern eine umfassende Beurteilung
durch geschulte Coder/innen. Der Vorgang des
Coding wird in Kapitel VIII ausgeführt.
Abbildung III.4 zeigt die Prozentanteile der
Aufgabenformate im Haupttest 2006 (ohne
einstellungsbezogene Items). Von den 184
Testaufgaben des Haupttests erfordern 39 % eine
Antwort durch die Schüler/innen (kurzes und
langes offenes Format). Bei etwas mehr als der
Hälfte der Aufgaben wählen die Schüler/innen
aus mehreren vorgegebenen Antwortalternativen
eine aus (Multiple-Choice oder komplexe Multiple-Choice-Aufgabe),
die geschlossenen Aufgaben
haben einen Anteil von 8 %.
32 %
lange, offene Aufgaben
kurze, offene Aufgaben
geschlossene Aufgaben
komplexe Multiple-Choice-Aufgaben
Multiple-Choice-Aufgaben
Abbildung III.4: Überblick über die Verteilung der
Itemformate in PISA 2006
3. Itementwicklung
Die Entwicklung der Testaufgaben ist ein zentrales Element von PISA. Als theoretische Basis für
die Itementwicklung dienen die in Abschnitt 1 idK. beschriebenen Frameworks. Der Prozess der
Itementwicklung gliedert sich in zwei Phasen: zum einen werden Aufgaben von internationalen
Expertenzentren entworfen, zum anderen werden die Teilnehmerländer eingeladen, Items einzureichen.
Bevor die Aufgaben zur Erprobung im Feldtest eingesetzt werden, werden diese von internationalen und
nationalen Expertinnen und Experten begutachtet und überarbeitet. Nach dem Feldtest werden umfangreiche
Itemanalysen durchgeführt, auf deren Basis die Aufgaben für den Haupttest ausgewählt und überarbeitet
werden. Durch diese Vorgehensweise wird sichergestellt, dass letztlich jene Aufgaben ausgewählt
werden, die in allen Teilnehmerländern einwandfreie Itemstatistiken aufweisen.
Zur Erfassung der Hauptdomäne Naturwissenschafts-Kompetenz in PISA 2006 wurde ein breites
Spektrum an neuen Aufgaben entwickelt. Für die beiden Subdomänen Mathematik und Lesen wurden
„alte“ Aufgaben (aus PISA 2000 und 2003) eingesetzt, die in unveränderter Form übernommen werden
III. Testinstrumente
Seite 43