Evaluation in der deutschen Entwicklungszusammenarbeit - HWWI

Evaluationssysteme deutscher EZ-Organisationen 125
deutlich aufzustocken. Dies gilt insbesondere auch vor dem Hintergrund der mit Wirkung
vom März 2006 geänderten Verwaltungsvorschriften (VV) der BHO, die umfassende
Erfolgskontrollen bei allen sogenannten „Zuwendungsempfängern“ vorsehen. Wie im
vorangegangenen Kapitel ausgeführt, können Evaluationseinheiten einen zentralen
Beitrag zur QS von Evaluation leisten. Hierfür brauchen sie nicht nur ein klares Mandat
sondern auch Personal, das sich um Evaluationsaufgaben kümmert. Sicherlich kann es
organisatorisch eine sinnvolle Lösung sein, QM und Evaluation in einer Einheit zusammen
zu fassen, doch dann muss auch sichergestellt werden, dass für die Evaluation, die
durch QM nicht ersetzt werden kann (vgl. Stockmann 2006), genügend Personalressourcen
vorhanden sind. Auch kleine EZ-Organisationen (gemessen am Budget) sollten über
eine Personalstelle für Evaluation (und ggf. QM) verfügen. Dass dies machbar ist, zeigen
z.B. hbs und RLS. Schwer verständlich ist, dass es nach wie vor selbst „mittelgroße“ EZ-
Organisationen (Budget 50-200 Mill. €) gibt, die keine oder kaum Personalressourcen für
Evaluation aufwenden (z.B. Ci, DED).
Personalstellen oder Organisationseinheiten für Evaluation sind auch dann notwendig,
wenn diese selbst keine Evaluationen durchführen, sondern wenn die Evaluationen von
den operativen Einheiten der EZ-Organisationen oder den Partnerorganisationen geleistet
werden. In diesen Fällen kommt den Evaluationseinheiten die Aufgabe zu, die durchführenden
Referate, die in der Regel keine umfassenden Evaluationskenntnisse haben werden,
beim Management (von der Formulierung der TOR, über die Auswahl der Gutachter
bis zur Auftragsvergabe und Berichtsabnahme) zu beraten und die Qualität sicherzustellen.
Qualitätsentwicklung und -sicherung im Evaluationsbereich ist natürlich nicht nur eine
Frage der Quantität, also wie viele Personen dafür verantwortlich sind, sondern auch
eine der Qualität, also welche Qualifikationen diese Personen aufweisen.
Qualitätsanforderungen
Bei einer Analyse der Qualitätsanforderungen fällt auf, dass in allen untersuchten Organisationen
eine Vielzahl von Kenntnissen und Fertigkeiten aufgezählt werden, zu denen
jedoch fundierte Evaluationskenntnisse nicht gehören. Stattdessen werden in der Regel
mehrjährige Berufserfahrung, Institutionenkenntnisse, bei der KfW auch Sektorkenntnisse
sowie die Kenntnis volks- und betriebswirtschaftlicher Bewertungsmethoden, Sprachkenntnisse
etc. verlangt. Bei den politischen Stiftungen und kirchlichen EZ-Organisationen
wird zudem auf sozio-kulturelle und Gender-Sensibilität sowie auf Erfahrungen
im Projektmanagement Wert gelegt. Wenn überhaupt werden Evaluationserfahrung (z.B.
als Gutachter), aber keine fundierten theoretischen und methodischen Evaluationskenntnisse
erwartet. Dies erscheint vor allem vor dem Hintergrund der bereits geschilderten
steigenden Anforderungen an die Qualität von Evaluationen problematisch, unabhängig
davon, ob die Evaluationsstelle oder -einheit selbst Evaluationen durchführt, diese nur
managt oder die Durchführenden berät. Hierzu ist nicht nur eine fundierte Kenntnis der
potenziell einsetzbaren Verfahren und Methoden, der Indikatorenentwicklung, der Konzipierung
von Monitoring & Evaluationssystemen, der professionellen Organisation von
Ablaufprogrammen und vieles andere mehr von Nöten. Wie sonst sollte eine kompetente
Beratung oder auch nur die Beurteilung der Qualität von intern oder extern durchgeführter
Evaluation möglich sein?