FORSCHUNGSMETHODEN

RELIABILITÄT
Jeder Messwert (X) setzt sich additiv aus dem „wahren Wert“ (T) und einem
Messfehler (E) zusammen. Die Reliabilität ist dementsprechend umso größer, je
kleiner der zu einem Messwert X gehörende Fehleranteil E.
Der Idealfall (X=T; E=0) tritt in der Realität quasi nie auf. Ursache dafür sind
technische-, menschliche- und situative Fehlerquellen.
Definition: Die Reliabilität ist der Anteil der wahren Varianz an beobachteter
Varianz.
Je größer dieser Anteil ist, je geringer also die Fehlervarianz ist, desto höher die
Reliabilität.
Es gibt mehrere Möglichkeiten, die Reliabilität zu bestimmen:
Paralleltest-Reliabilität: Vergleichbare Paralleltests werden identischen
Stichproben vorgegeben und deren Ergebnisse miteinander korreliert.
Retest-Reliabilität: Ein und derselbe Test werden einer Stichprobe mehrmals
vorgegeben und die Ergebnisreihen miteinander korreliert.
Innere Konsistenz:
Split-Half-Reliabilität: Test wird in zwei gleichwertige Hälften geteilt und
die Ergebnisse miteinander korreliert.
Konsistenzanalyse: Test wird in beliebig viele Testelemente geteilt und die
Reliabilität über Aufgabenschwierigkeit und Trennschärfekoeffizienten
bestimmt.
VALIDITÄT
Man unterscheidet zwischen:
1. Inhaltliche Validität
Wie valide bzw. genau ist das Messverfahren in Bezug auf den zu messenden
Inhalt?!
Bestimmungsmaß: Rating von Experten
2. Konstruktvalidität
Wie valide bzw. genau ist das Messverfahren in Bezug auf das zu
untersuchende Konstrukt (z.B. Intelligenz)?!
Bestimmungsmaß: Rating von Experten
3. Kriterienbezogene Validität
Wie genau stimmt der Test mit einem unabhängig vom Test erhobenen
Außenkriterium (z.B. Schulleistung) überein?!
Bestimmungsmaß: Korrelation des Testergebnisses mit einem
Außenkriterium
Außerdem ist zu unterscheiden zwischen interner – und externer Validität:
Interne Validität: Ein Versuch ist intern valide, wenn Veränderungen der AV
eindeutig auf Variationen der UV zurückzuführen sind.
Am höchsten ist die interne Validität dementsprechend, wenn SV=0!
Externe Validität: Ein Versuch ist extern valide, wenn die Ergebnisse der
Stichprobe auf die Population übertragbar sind (Generalisierbarkeit der
Ergebnisse)!
Die externe Validität ist v.a. dann problematisch, wenn unter „realen
Bedingungen“ noch andere Faktoren als in der Untersuchung eine Rolle
spielen.
Die interne Validität ist eine notwendige, aber keineswegs hinreichende
Bedingung für externe Validität!
6