Leitfaden_Evaluieren_d

50 – Die Theorie
Neben der Beobachtung anhand objektiver
Indikatoren bedürfen vor allem die qualitativen
Ziele einer weiter gehenden Evaluation.
Im Rahmen der Projektplanung oder
Zielvereinbarungen werden zusätzlich Indikatoren
gemeinsam festgelegt und spezifisch
erhoben und dokumentiert. Outputindikatoren
bilden die unmittelbaren
Produkte von Projekten ab, anhand derer
sich auch Ziele im Rahmen von Zielvereinbarungen
quantifizieren lassen.
Daten interpretieren
Mit der Anwendung von Indikatoren ist
die Arbeit der Evaluation nicht getan. Die
aufgrund der Indikatoren erhaltenen Daten
bedürfen einer Interpretation. Erst
wenn die erhobenen quantitativen Werte
und die qualitativen Angaben im grösseren
Kontext eingeordnet sind, werden
sie aussagekräftig. Indikatoren ersetzen
nie die sorgfältige Analyse des Umfeldes.
Darin unterscheidet sich eine Evaluation
vom kontinuierlichen Datensammeln innerhalb
des Monitorings, was zu den üblichen
Managementaufgaben in einem Projekt
gehört. Besucherzahlen können zum
Beispiel aussagen, ob es sich beim Publikumssegment
der Veranstaltung um ein
Mainstream- oder Insiderpublikum handelt.
Die Zahlen erklären aber nicht, wieso
so wenig Publikum im Saal war. Es kann
sein, dass das Wetter gut oder die Öffentlichkeitsarbeit
schlecht war. Statistische
Daten sagen erst durch ihre Interpretation
wirklich etwas aus.
Mit qualitativen Methoden wie z.B. Interviews
und Befragungen wird nach der
erfolgreichen Umsetzung der spezifischen
Projektziele gefragt. Durch solche Erhebungen
können aber auch subjektive Experteneinschätzungen
über den Erfolg
und die Wirkungen von Massnahmen systematisch
erfasst werden. Qualitative Methoden
ergänzen die quantitativen und
ermöglichen eine Gesamtschau über den
Erfolg von Massnahmen bzw. die Umsetzung
von Zielen im Rahmen von Zielvereinbarungen.
Werden die im Rahmen einer Evaluation
gesammelten Daten mit jenen eines vergleichbaren
Projekts in einer ähnlichen
Region verglichen, spricht man von Benchmarking.