Kursbuch Wirkung - Das Praxishandbuch für alle, die Gutes noch besser tun wollen

die jeweils nicht am Projekt teilgenommen
haben, um Hinweise darauf zu erhalten, ob
das Projekt bei den Teilnehmern Wirkung
erzielt hat.
Und auch hier lässt sich mit der Wirkungslogik
und Wirkungsnachweisen, die während
der Teilnahme am Projekt erhoben wurden,
argumentieren (→ „Wirkungen nachweisen,
die erst nach längerer Zeit eintreten“).
6.3 QUALITÄTSKRITERIEN
FÜR DIE DATENERHEBUNG
Verschiedene Datenquellen und
Erhebungsmethoden nutzen
Wenn Sie auf Ihrer Seereise sichergehen
wollen, dass Sie auf dem richtigen Weg sind,
verlassen Sie sich wahrscheinlich nicht nur
auf den Blick aus dem Ausguck, sondern
Sie nutzen auch die Informationen aus den
Seekarten und dem GPS. Die verschiedenen
Blickwinkel helfen, ein möglichst aussagekräftiges
Ergebnis zu bekommen und Fehler
bei der Navigation zu vermeiden.
Auch in der Wirkungsanalyse ist es wichtig,
verschiedene Datenquellen und Methoden
der Datenerhebung zu kombinieren, um die
Datenqualität zu überprüfen und gegebenenfalls
zu verbessern. Nutzen Sie für eine aussagekräftige
Analyse daher sowohl quantitative
als auch qualitative Erhebungsmethoden.
In der Fachsprache wird hierfür der Begriff
„Triangulation“ genutzt.
Die Instrumente zur Datenerhebung
testen
Bevor es „ernst“ wird und Sie mit Ihrer
Datenerhebung beginnen, sollten Sie Ihre
Instrumente der Datenerhebung (das heißt,
den erarbeiteten Fragebogen oder den Interviewleitfaden)
testen. Denn egal, wie gut
die Instrumente erarbeitet und das Vorgehen
geplant wurden: Es können sich immer Fehler
einschleichen, die die Qualität der Erhebung
gefährden. Daher lohnt sich der Aufwand,
die Instrumente zunächst bei einer kleinen
Zahl von Personen zu testen und diese danach
zu befragen. Im sogenannten „Pretest“
sollte das Augenmerk auf folgende Punkte
gelegt werden:
• Sind die Fragen klar und unmissverständlich
formuliert? Kann die befragte Zielgruppe
mit der Wortwahl etwas anfangen oder
kommen unbekannte Fremdworte etc. vor?
• Ist der Inhalt der Fragestellungen sinnvoll
und wird darauf geachtet, dass die Fragen
bei den Befragten kein Unbehagen oder eine
Abwehrhaltung hervorrufen?
• Sind die Anweisungen an die Personen, die
die Erhebung durchführen, klar und unmissverständlich?
• Ist die Länge der Befragung / des Fragebogens
angemessen? Oft dauern Befragungen
zu lange und die Befragten werden ungeduldig
und unkonzentriert, was sich negativ auf
die Qualität der Antworten auswirkt.
WIRKUNG
PLANEN
WIRKUNG
ANALYSIEREN
WIRKUNG
VERBESSERN
Projektbeispiel PAFF
Um festzustellen, ob sich
die schulischen Leistungen
der teilnehmenden
Jugendlichen verbessern,
nutzt PAFF verschiedene
Methoden der Datenerhebung:
Dabei werden die
Schulnoten in den
verschiedenen Fächern
regelmäßig festgehalten,
die Jugendlichen im
Rahmen einer systematischen
Beobachtung
während des Unterrichts
beobachtet und die Lehrer
hinsichtlich ihrer Ein–
schätzung der Entwicklung
der Jugendlichen befragt.
3 2 1
85