Kursbuch Wirkung - Das Praxishandbuch für alle, die Gutes noch besser tun wollen

Projektbeispiel PAFF:
Im Rahmen des Monitorings
ist es bei PAFF die Aufgabe
der Patengruppenbetreuer,
die Daten von den Paten,
Patenkindern und Lehrern
zusammenzutragen. Die
Daten werden dann von der
hauptamtlichen Projektleitung
aufbereitet und ausgewertet.
Für die Evaluation wurde
ein Wissenschaftler vom
Pädagogik-Lehrstuhl der
Universität gewonnen, dessen
Studenten die Evaluation als
einen Teil ihrer Abschlussarbeit
umgesetzt haben.
Die Rolle der Stakeholder
bei der Wirkungsanalyse
klären
• Welche Rolle spielen
die Stakeholder bei der
Durchführung der Wirkungsanalyse?
• Welche Informationen
aus der Wirkungsanalyse
sind für die Stakeholder
relevant?
• Können sie unterstützen,
beeinflussen, bremsen,
verhindern? Haben sie
besondere Hoffnungen,
Interessen oder Befürchtungen
hinsichtlich der
Datenerhebung oder
bestimmter Fragestellungen
darin?
• Falls ja, ergeben sich
daraus Konsequenzen für
die geplante Erhebung?
Müssen zum Beispiel
andere Fragestellungen
oder andere Beteiligungsformen
gewählt werden?
meist höhere Kosten als Evaluationen, die
von Projektmitarbeitenden durchgeführt werden,
zum anderen braucht nicht jedes Projekt
unbedingt eine externe Evaluation.
Gleichzeitig erfordert Evaluation an vielen
Stellen natürlich fachliche und methodische
Kompetenzen, die innerhalb der Organisation
oft nicht zur Verfügung stehen. Manchmal
macht es Sinn, diese aufzubauen, aber
manchmal ist es sinnvoller, die Expertise von
außen hinzuzuziehen. Hier muss von Fall zu
Fall abgewogen werden.
Die Unabhängigkeit eines externen Evaluators
kann dann zum Nachteil werden, wenn
er deswegen Schwierigkeiten hat, an die für
die Erhebung relevanten Informationen zu
kommen. Für den Erfolg der Evaluation ist es
extrem wichtig, dass eine gute Zusammenarbeit
zwischen dem externen Evaluator und
den Stakeholdern stattfindet. Dafür muss er
das Vertrauen der Stakeholder besitzen, muss
aber gleichzeitig seine Neutralität waren.
Bei der Wirkungsanalyse sollte es nicht um
das Abarbeiten von Berichtspflichten gehen,
sondern darum, die Erkenntnisse aus der Wirkungsanalyse
als Grundlage für ein kritisches
Nachdenken und Lernen über das Projekt
zu verstehen und zu nutzen. Und das kann
nur bis zu einem gewissen Grad nach außen
abgegeben werden. Bei der Mischform aus
der internen und externen Evaluation führen
Projektmitarbeiter die Evaluation gemeinsam
mit einem externen Berater, der Expertise
und den Blick von außen mitbringt, durch.
Hier kommen die Vorteile aus beiden Ansätzen
zusammen.
Unabhängig davon, ob Evaluationen intern
oder extern durchgeführt werden, sollte
innerhalb des Projekts klar sein, wer für die
Wirkungsanalyse die Hauptverantwortung
hat. Hier sollten die Fäden aller Prozesse im
Wichtig zu wissen:
Ein Evaluator sollte
folgende Qualifikationen
mitbringen
• Erfahrung und Wissen im Themengebiet
und Erfahrung mit Evaluationen im
Themengebiet
• gutes Methodenwissen und ein hohes
Qualitätsbewusstsein
• Objektivität (wobei auch der Evaluator
nie vollständig objektiv sein kann,
denn auch er hat eine Meinung und
Wertehaltung und arbeitet vor dem
Hintergrund früherer Erfahrungen. Daher
muss in der Evaluation deutlich
gemacht werden, an welchen Stellen der
Evaluator seine persönliche Meinung
einbringt.)
• eine gute Kommunikationsfähigkeit
(mündlich und schriftlich)
• eine vertrauenswürdige und angenehme
Persönlichkeit sowie Sensibilität im
Umgang mit der Zielgruppe (z.B. bei
Genderfragen)
Rahmen der Wirkungsanalyse zusammenlaufen,
und die Person sollte Ansprechpartner
sein, wenn es bei M&E Probleme gibt. Für
diese koordinierenden Aufgaben müssen
natürlich ausreichende Ressourcen zur Verfügung
gestellt werden. Wo notwendig, muss
teamintern Wissen aufgebaut werden.
Wer muss in den Prozess der Wirkungsanalyse
einbezogen werden?
Grundsätzlich gilt: Wirkungsorientierte
Projektsteuerung, die nicht von der Organisations-
bzw. Projektleitung mitgetragen und
aktiv gefördert wird, ist zum Scheitern verurteilt!
Wirkungsorientierte Projektsteuerung
ist eine Aufgabe im Rahmen der Organisationsentwicklung,
die aktiv gefördert werden
52 © PHINEO gAG 2013, www.phineo.org – Kursbuch Wirkung