Kursbuch Wirkung - Das Praxishandbuch für alle, die Gutes noch besser tun wollen

sondern es sollen praxisnahe Tipps für den
Umgang mit Daten aus der Wirkungsanalyse
vermittelt werden, die auch von kleinen
Projekten selbstständig umgesetzt werden
können. In vier Schritten wird gezeigt, wie Sie
aus einem „Berg an Informationen“ nützliche
Schlussfolgerungen ziehen und Handlungsempfehlungen
entwickeln können. Davor
soll die Frage nach dem Zeitpunkt und den
Zuständigkeiten für Auswertung und Analyse
geklärt werden.
7.1 WANN UND WIE OFT
SOLLTEN DIE DATEN
AUSGEWERTET UND ANA-
LYSIERT WERDEN?
Erfahrungsgemäß sind Daten, die nicht
bald nach ihrer Erhebung genutzt werden,
verloren. Die Auswertung und Analyse der
Daten sollten daher so bald wie möglich nach
deren Erhebung stattfinden. Denn zum einen
kann nur so gewährleistet werden, dass die
Informationen, die für die weitere Projektsteuerung
und die Kommunikation benötigt
werden, auch aktuell sind. Zum anderen
haben Sie nur dann die Möglichkeit, noch
weitere Informationen einzuholen, wenn Sie
bald nach der Erhebung der Daten feststellen,
dass es noch Unklarheiten gibt.
Das bedeutet, dass sich die Auswertung
der Daten in der Regel dem Rhythmus der
Datenerhebung anpasst ( → Kap. 4 „Wann
sollte M&E durchgeführt werden?“). Bei der
Datenanalyse hängt der Zeitpunkt der Analyse
aber auch von der jeweiligen Fragestellung
ab. So können Daten zum Beispiel kurz nach
ihrer Erhebung analysiert werden, um ein Bild
vom aktuellen „Status Quo“ zu bekommen.
Dieselben Daten können aber auch zu einem
späteren Zeitpunkt für eine weitere Analyse
genutzt werden, wenn zum Beispiel
Entwicklungen im Zeitverlauf analysiert
werden sollen.
7.2 WER IST FÜR DIE
DATENAUSWERTUNG UND
-ANALYSE ZUSTÄNDIG?
Beim Monitoring und bei internen Evaluationen
fällt die Auswertung der Daten in den
Aufgabenbereich der Projektmitarbeiter, die
auch die Daten erheben. Wenn dabei mehrere
Personen beteiligt sind, ist es sinnvoll, eine
verantwortliche Person zu bestimmen, bei der
die Daten zusammenlaufen und die die Auswertung
koordiniert. Bei externen Evaluationen
ist die Auswertung Bestandteil der Arbeit
der externen Evaluatoren.
Die Qualität der Analyseergebnisse hängt
entscheidend davon ab, wer bei der Analyse
einbezogen ist. Die Datenanalyse sollte daher
nicht „im stillen Kämmerlein“ stattfinden!
Tauschen Sie sich mit Kollegen aus dem Projekt
aus und binden Sie die Stakeholder mit
ein, die die Ergebnisse der Analyse einschätzen
und gegebenenfalls hinterfragen können.
So können verschiedene Interpretationen der
Ergebnisse einbezogen werden, mögliche
Fehler in den Schlussfolgerungen können
aufgedeckt werden, und die angestrebten
Lernprozesse werden von Beginn an auf eine
breitere Basis gestellt. Bei einer externen
Evaluation bedeutet das, dass der externe
Evaluator die Ergebnisse der Evaluation vor
einer für die jeweilige Schwerpunktsetzung
und den Zweck der Evaluation repräsentativen
Gruppe von Stakeholdern vorstellen und
es die Möglichkeit zum Feedback geben soll.
WIRKUNG
PLANEN
WIRKUNG
ANALYSIEREN
WIRKUNG
VERBESSERN
Projektbeispiel PAFF
Die Informationen, die bei
PAFF im Rahmen des
regelmäßigen Monitorings
erhoben werden, werden
von der Projektleitung
ausgewertet und in einem
ersten Schritt analysiert.
Die Ergebnisse werden bei
den Treffen des Leitungsteams
vorgestellt, diskutiert
und hinterfragt. Dabei werden
je nach Bedarf zum
Beispiel Paten oder Lehrer
einbezogen.
3 2 1
Als die Ergebnisse der
externen Evaluation (mit
dem Fokus auf dem Thema
„Sozialkompetenzen der
teilnehmenden Jugendlichen“)
vorgestellt wurden,
waren neben dem Leitungsteam
einige erfahrene Paten,
die Klassenlehrer aus den
Klassen, aus denen Schüler
am Projekt teilnehmen,
sowie zwei Vertreter von
Betrieben, bei denen
Projektteilnehmende eine
Ausbildung machen,
anwesend. Dadurch war es
möglich, die Ergebnisse der
Evaluation mit den Alltagserfahrungen
der verschiedenen
Stakeholder zu ver -
gleichen und zu diskutieren.
87