Leistungsbewertung in Deutsch Köster Vortrag 2 (pdf-Datei)

Leistungsbewertung im Fach
Deutsch
Einführungsvortrag 2
Schwerpunkt
Kompetenzbereich „Lesen und
Textverstehen“

Leistungsaufgaben
• Was unterscheidet Leistungsaufgaben von
Lernaufgaben im Bereich „Lesen und
Textverstehen“?
Natürlich dienen Lernaufgaben dem Erwerb von
Kompetenzen, sie dienen aber im gleichen Maß
dem Verstehen bestimmter Texte und damit dem
Erwerb kulturellen Kapitals.
Leistungsaufgaben sollen Anlass bieten, erworbene
Kompetenzen zu zeigen. Der beste Ausweis für
Textverstehenskompetenz ist das Verständnis eines
unbekannten Textes.

Prüfungsaufgaben
In Zentralen Prüfungsaufgaben geht es darüber
hinaus auch um den Abschluss.
Abschlussprüfungen zertifizieren bestimmte
Standards.
Das Zertifikat muss valide sein. Es darf keine
falschen Versprechungen machen.
Umgekehrt muss der Inhalt des Zertifikats auch
realistisch sein, d. h. realisierbar.

Aufgaben zum Ausweis von
Textverstehenskompetenz
Die Zentralen Prüfungen für den HSA und den
MSA enthalten einen Teil, in dem Leseverstehen
ohne Textproduktion getestet wird.
Es handelt sich in erster Linie um MC-Aufgaben.
Kritisch zu fragen ist, was diese Aufgaben testen.
Testen sie wirklich Lesekompetenz?

Die Dreiheit der Lernerfolgskontrolle
• Aufgaben: Validität?
• Korrektur: Objektivität!
• Bewertung: Objektivität!

Prüfungsaufgaben
betonen
• Wissen und
• Abschluss
• Einzelne(n)
• Vergleichbarkeit
• Selektion und
• Verständnis
• Prozess
• Gruppe
• Entwicklung
• Fairness

Sehen wir uns den ersten Prüfungsteil der MSA-
Prüfung an:

MSA
1. Prüfungsteil: Leseverstehen
Text: Ohne Angabe von Autor und Titel
564 Wörter
13 Einzelaufgaben

Prüfungsaufgaben
• Entsprechen die Aufgaben folgenden
Kriterien?
1. Klarer Fokus,
2. Validität des Inhalts,
3. Unabhängigkeit der einzelnen Aufgaben,
4. Kognitives Anregungspotenzial.

Kriterium 1: Klarer Fokus
Entsprechen die Aufgaben den genannten
Kriterien?
Kriterium 1: Klarer Fokus
Das Aufgabenset hat einen klaren Focus:
Leseverstehen ohne Textproduktion.

Kriterium 3: Unabhängigkeit der Teilaufgaben
Die vorliegenden Testaufgaben sind voneinander
unabhängig.
Auch Aufgabe 13, die zur Bewertung und
Nutzung des Ausgangstextes aufruft, kann ohne
Lösung der anderen Aufgaben bewältigt werden.

Kriterium 4: Kognitive Anregungspotenziale
Die Aufgabe soll die Prüflinge fordern, aber nicht
überfordern.
Grundsätzlich ist mit dem MC-Format kognitive
Anregung verbunden. Denn die Auswahl-
Anforderung spricht Prüflinge mehr an als die
Anforderung, selbst eine Antwort zu generieren.
Formal bieten MC-Aufgaben
Entscheidungsspielraum und begrenzen ihn
zugleich.

Kriterium 2: Validität des Inhalts
Entsprechen die Aufgaben den genannten
Kriterien?
Kriterium 2: Inhaltsvalidität
Prüfen die Aufgaben, was sie prüfen sollen?

Aufgabe 3
Was würden Sie ankreuzen?
Welche der folgenden Aussagen passt zu dem, was
in Abschnitt 4 steht?
Kreuze die richtige Antwort an.
☐ a) Hanna sagt nicht die Wahrheit.
☐ b) Die in Abschnitt 3 gezeigte Situation
kann in Wirklichkeit nicht eintreffen.
☐ c) Alle ins Netz gestellten Informationen
bleiben noch lange abrufbar.
☐ d) Internetnutzer nehmen oftmals die
Wirklichkeit nicht mehr richtig wahr.

• Worin besteht das Validitätsproblem?
Wer die nahe liegendste bzw. plausibelste
Antwort wählt, hat die richtige Lösung getroffen.
Angebot c ist richtig.

Aufgabe 7
Was würden Sie ankreuzen?
Kreuze die richtige Antwort an.
„Rufrettungsdienste“ oder „Rufmanager“ (Abschnitt
11) ...
☐ a) gehen in jedem Fall gegen Google vor Gericht.
☐ b) entfernen immer alle Inhalte über eine Person
aus dem Netz.
☐ c) erschweren das Auffinden von Inhalten im Netz.
☐ d) suchen selbst Inhalte auf und kommentieren
sie.

• Worin besteht das Validitätsproblem?
Wer die am wenigsten allgemeine Antwort
wählt, hat die richtige Lösung getroffen.
Angebot c ist richtig.

Aufgabe 8
Was würden Sie ankreuzen?
Kreuze die richtige Antwort an. Beziehe dich auf den
gesamten Text.
Der Ausdruck „sorglose Offenheit“ (Z. 2) meint, dass
Internetbenutzer ...
☐ a) bei ihren Äußerungen im Internet zu wenig auf Fehler
achten.
☐ b) nicht daran denken, ältere Fotos im Netz zu
aktualisieren.
☐ c) leichtfertig sehr persönliche Daten ins Internet
stellen.
☐ d) sich sorgen, dass Fremde sich ihre Daten ansehen
können.

• Worin besteht das Validitätsproblem?
Auch hier gilt:
Wer die naheliegendste bzw. plausibelste
Antwort wählt, hat die richtige Lösung getroffen.
MC-Aufgaben sollten keine unsinnigen
Distraktoren enthalten.
Angebot c ist richtig.

Ein weiteres Validitätsproblem liegt darin, dass
durch einen unsinnigen Distraktor faktisch nur
noch drei Angebote zur Wahl stehen, sodass die
Wahrscheinlichkeit einer richtigen Lösung durch
Zufall bei 33 Prozent liegt.

Kriterium 2: Inhaltsvalidität
Fazit:
Eine Reihe dieser Aufgaben kann auch ohne
Textlektüre gelöst werden.
Die Aufgaben sollten so modelliert sein, dass sie
nicht auf der Basis von Weltwissen gelöst
werden können.
Das müssen auch die Prüflinge wissen.

Kriterium 2: Inhaltsvalidität
Was wird geprüft?
• Identifikation einzelner Informationen,
• Verständnis einzelner Abschnitte,
• Weltwissen.

Kriterium 2: Inhaltsvalidität
• Was zu kurz kommt:
1. die Sicherung des gesamten inhaltlichen
Zusammenhangs.
Dabei sind folgende Fragen hilfreich:
Worum geht es im vorliegenden Text?
Wie hängen die einzelnen Abschnitte
zusammen?

Kriterium 2: Inhaltsvalidität
• Was zu kurz kommt:
2. die Ebene der Reflexion und Bewertung.
Dazu braucht es einen Reflexions- oder
Bewertungsmaßstab.
Das kann die eigene Sicht auf den Gegenstand
sein oder auch der Rückgriff auf einen
Vergleichstext.

Hilfsangebote
• Es kann durchaus ein sinnvolles Angebot sein,
die Schüler im Vorfeld eine Mindmap erstellen
zu lassen.
• Mindmaps sind niemals Selbstzweck, sondern
Hilfsangebot für die, denen sie dienlich sind.

Wie ist der Text aufgebaut?

Validität ist entscheidend
Diese Aufgabe erfüllt zwar drei der vier
genannten Kriterien, ist aber inhaltlich nicht
valide.
Es bleibt offen, ob die Aufgabe Weltwissen oder
Lesekompetenz prüft.
Meine Mitarbeiterin hat alle MC-aufgaben
richtig gelöst, obwohl ihr der Text unbekannt
war.

Leistungsaufgaben
Welche Anforderungen stellen Leseaufgaben
ohne Textproduktion?
• Wort- und Satzerkennung
• Sicherung des Zusammenhangs zwischen zwei
Sätzen
• Sicherung des gesamten inhaltlichen
Zusammenhangs
• Sinnkonstruktion
• Kritische Reflexion

Leistungsaufgaben
Welche Anforderungen stellen Leseaufgaben
ohne Textproduktion?
• Wort- und Satzerkennung
• Sicherung des Zusammenhangs zwischen zwei
Sätzen
• Sicherung des gesamten inhaltlichen
Zusammenhangs
• Sinnkonstruktion
• Kritische Reflexion

Beispiele

Wort- und Satzerkennung
Welche Anforderungen stellen Leseaufgaben
ohne Textproduktion?
Wir lernen nicht für das Leben, sondern für die
Schule.

Sicherung des Zusammenhangs
zwischen zwei Sätzen
„Für die Schule lernen oder für das Leben? Das
sind die Alternativen von gestern.“
Wer versteht, dass „Alternativen“ sich auf
„Schule“ versus „Leben“ bezieht, der hat den
Zusammenhang zwischen zwei Sätzen
hergestellt, hat also lokale Kohärenz etabliert.
Viele Testaufgaben zielen auf diese
Anforderungsebene.

Sicherung des Zusammenhangs auf
Abschnittebene
Den Satz „Wir lernen nicht für das Leben,
sondern für die Schule“ hat der römische Philosoph
Seneca im 1. Jahrhundert vor Christus an einen
jüngeren Politiker und Literaten namens Lucilius
geschrieben. Was will Seneca damit sagen?
Er ist der Meinung, dass der schulische Unterricht
oft nur auf kurzfristige Ziele gerichtet ist und nicht
der Gegenwart und der Zukunft der Schüler dient.

Sicherung des Zusammenhangs auf
Abschnittebene
Wer den Zusammenhang zwischen diesen drei
Sätzen herstellt und verstanden hat, dass Seneca
seine Äußerung in kritischer Absicht formuliert
hat, der hat einen Zusammenhang zwischen
mehreren Sätzen hergestellt und explizit
gemacht, was nicht ausdrücklich gesagt ist: dass
Senecas Satz kritisch gemeint ist.

Verstehen des gesamten
Textzusammenhangs
Nehmen wir an, diese eben gehörten Sätze
stammen aus einem längeren Text, der darüber
berichtet, dass in Frankreich Berufsschulklassen
Geldprämien erhalten sollen, wenn alle Schüler
regelmäßig zum Unterricht erscheinen, dann haben
die Leser den Zusammenhang auf Abschnittsebene
gesichert.

Verstehen des gesamten Textzusammenhangs
So heißt es in der Wochenzeitung „Die Zeit“
vom 15. 10.2009:
„Wenn sich durchsetzt, was in Frankreich derzeit
erprobt wird, dann kann Seneca einpacken. Sein Satz
klang ohnehin schon so abgenudelt wie ein altes
Chanson: für die Schule lernen oder für das Leben? Das
sind die Alternativen von gestern. Von jetzt an wird nur
noch für Cash gelernt!
Drei Berufsschulen im Pariser Umland haben eine
Prämie für ihre Schüler ausgelobt, wenn sie regelmäßig
zum Unterricht erscheinen. Bisher hat dort jeder
Schüler regelmäßig gefehlt.

Verstehen des gesamten Textzusammenhangs
Selbst eine mobile Eingreiftruppe, die Jagd auf
Schulschwänzer machte, konnte das nicht ändern.
Da Strafe offensichtlich nichts bringt, versuchen die
Rektoren es jetzt mit Belohnung. Bis zu 10 000 Euro
haben Sie der Klasse mit der niedrigsten Fehlquote
versprochen. Die Mittel kommen von Sarkozys
“Hochkommissariat für Jugend“. Mit dem Geld können
die Schüler eine Klassenfahrt unternehmen oder die
Summe aufteilen, um so etwa allen einen Teil des
Führerscheins zu finanzieren. [...]“

Verstehen des gesamten Textzusammenhangs
Wenn Senecas Satz im Kontext der ganzen
Glosse integriert wird, dann findet Verstehen
auf der Textebene statt:
Die Leser sichern den inhaltlichen
Zusammenhang des gesamten Textes:
Sie etablieren globale Kohärenz.

Sinnkonstruktion
• Bei Sachtexten resultiert der Sinn häufig aus
der Sicherung des inhaltlichen
Zusammenhangs.
• Dass das bei literarischen Texten anders ist,
werde ich an einem entsprechenden Text
zeigen.

Kritische Reflexion
• Was der kritischen Reflexion unterliegt, ist
weniger der Text als der Inhalt:
die dargestellte Maßnahme.
Interessanterweise ist dieser Vorschlag nicht
realisiert worden. Ein Gegenargument war
stärker:
„Das öffentliche Bildungsangebot ist ein so
großes Privileg, dass für seine Inanspruchnahme
nicht noch Geld bezahlt werden darf.“

Kritische Reflexion
• Gibt es auch Argumente, die für die Bezahlung
sprechen?

Leistungsaufgaben
Welche Aufgabenarten sind zur
Leistungsermittlung geeignet?
• MC-Aufgaben dienen häufig zur
– Wort- und Satzerkennung
– Sicherung des Zusammenhangs zwischen zwei
Sätzen.

Leistungsaufgaben
Welche Aufgabenarten sind zur
Leistungsermittlung geeignet?
• Es erscheint schwierig, MC-Aufgaben zu
entwickeln, die sich auf folgende Levels
beziehen:
– Sicherung des gesamten inhaltlichen
Zusammenhangs
– Sinnkonstruktion
– Kritische Reflexion

Formate für Leistungsaufgaben
Es gilt zwischen verschiedenen Formaten zu
unterscheiden:
• Offene Formate: z. B. Interpretiere das
Gedicht
• Halboffene Formate: z. B. Ergänzung eines
mindmaps
• Geschlossene Formate: z. B. Kreuze die
richtige Antwort an; ordne ... zu

effektive Lernsteuerung
zur Vorbereitung auf die Leistungssituation
Gemeinsame Zusammenfassungen am Ende
der Stunde
• Mögliche Aufgaben zur Inhaltssicherung
(global):
– Vervollständigung eines Lückentextes (Aussparung
zentraler Aspekte)
– Zusammensetzung des in Teile zerschnittenen
Textes (je kleiner die Teile, desto schwieriger die
Aufgabe)
– Beantwortung von Fragen zum Text
Folie Schempershofe
46

Lernen – Leisten
• Lernphasen und Leistungsphasen trennen
• In die Lernphasen viele Beispiele für gute
Leistungen einbauen, Fehler dafür nutzen
• Kleine Test stärken Emre und Abbas
(Wellenreuther)
• „Sonstige Leistungen“ ausschöpfen
• Die Notenskala gedanklich erweitern
(„Gut“ auf G-Kurs-Niveau ermöglichen)
Folie Schempershofe
47

Leistungsaufgaben
Welche Voraussetzungen bringen die Lerner
mit?

normal?
• Alle Fehler müssen berichtigt werden (…).
• Bei schlechter äußerer Form oder bei einer
Zensur, die schlechter ist als „Ausreichend (4)“,
wird die gesamte Arbeit abgeschrieben.
• Die Arbeiten werden vor der Rückgabe
ausführlich im Unterricht besprochen; die Schüler
haben die Gelegenheit, die korrekten Lösungen in
ihr Schul-/Hausheft zu schreiben, um zu Hause
die Berichtigung überprüfen zu können.
• Das bedeutet, dass in einer Berichtigung keine
Fehler mehr sein können und dürfen!
Folie Schempershofe
49

Was hilft?
• Gute Aufgaben, die ins Zentrum des Themas
führen
• Aufgabenmix zur schnellen Korrektur
• Korrekturziel festlegen
• Zielbezogen korrigieren
• Korrektur-Curriculum langsam aufbauen
• Keine Berichtigung, aber Wiederholungen
einbauen
Folie Schempershofe
50