Evaluation in der deutschen Entwicklungszusammenarbeit - HWWI

Zusammenfassung 29
Robuste Methoden, die die Erfassung von Wirkungen und eine auf Wirkungshypothesen
beruhende (probabilistische) Ursachenzuschreibung möglichst zuverlässig erlauben,
sind für den Regelbetrieb zu entwickeln und standardmäßig zu nutzen.
Es zeichnet sich deutlich eine Zunahme projektübergreifender Evaluationen auf immer
höherem Aggregationsniveau ab. Im Verlauf dieser Entwicklung wird es zu vermehrten
Gemeinschaftsevaluationen verschiedener EZ-Organisationen und Geber auf
sektoralem, regionalen und Länderniveau kommen. Es werden zudem auch neue Instrumente
der EZ zu evaluieren sein. Dies impliziert neue Herausforderungen nicht nur
infolge der unausweichlichen Harmonisierung, sondern auch durch das Erfordernis
geeignete Evaluationsmethoden einzusetzen. Das BMZ und die übrigen größeren EZ-
Organisationen sollten daher die Entwicklung, Erprobung und Anwendung von angepassten
Evaluationsdesigns, Erhebungs- und Auswertungsmethoden gezielt fördern.
Die Prozessqualität hat bei den deutschen EZ-Organisationen schon ein beachtliches
Niveau erreicht. Um es weiter zu erhöhen, ist vor allem die Qualitätssicherung zu verbessern.
Hierzu gehört, dass es in jeder Organisation je nach Größe eine Evaluationseinheit
oder einen Evaluationsbeauftragten gibt, die/der für die Qualitätssicherung aller Evaluationen
zuständig ist und sie effektiv vornimmt.
Generell fehlen im deutschen Evaluationssystem vergleichende Analysen von Programmen
einer EZ-Organisation innerhalb eines Sektors oder Landes sowie interinstitutionelle
Vergleiche zwischen den Organisationen. Solche vergleichenden Evaluationen,
die zunehmend durch die Bestrebungen „Evaluation aus einem Guss“ erleichtert werden,
sollten in das Evaluationsportfolio aufgenommen werden, da sie einen erheblichen Nutzen
vor allem für das konzeptionelle Lernen versprechen.
Personal
Viele deutsche EZ-Organisationen verfügen in den Evaluationseinheiten über kompetentes
Personal, das jedoch häufig zu wenig auf seine sehr spezifischen Evaluationsaufgaben
vorbereitet ist. Deshalb sollten die EZ-Organisationen für ihre Evaluationseinheiten
ausgebildete und erfahrene Evaluatoren von außen rekrutieren, und/oder das interne
Personal entsprechend sorgfältig vorbereiten und laufend weiterbilden. Die an die Evaluation
insgesamt gestiegenen Anforderungen müssen sich auch im Qualifikationsprofil des
dafür vorgesehenen Personals widerspiegeln.
Dies gilt auch für die in externen Evaluationen eingesetzten Gutachter, bei denen angesichts
der Wirkungsorientierung der EZ und der zunehmenden Komplexität von Programmen
die Evaluations- und Methodenkompetenz immer wichtiger wird. Bei der
Auswahl der Gutachter sollte daher verstärkt auf entsprechende Aus- und Weiterbildung
geachtet werden.
Nutzung
Um die Nützlichkeit von Evaluationsergebnissen zu steigern, muss in stärkerem Maße als
bisher die Umsetzung von Empfehlungen überprüft werden. Hierzu ist zunächst ein
Management Response durch den Auftraggeber notwendig, in dem dargelegt wird, wer
für die Umsetzung welcher Empfehlungen in welchen Zeiträumen zuständig ist und
welche Empfehlungen warum nicht berücksichtigt werden sollen. Dieser Umsetzungsplan
ist durch ein möglichst unabhängiges Umsetzungsmonitoring zu begleiten. Abwei-