Outputorientierte Evaluierung

Output‐orientierte Evaluierung öffentlich geförderter FTI‐Programme
� Verbesserte Abstimmung der Programme und Instrumente durch vermehrte
Portfolioevaluierung. Das österreichische Innovationsförderungssystem ist durch eine Vielzahl
an Akteuren und Programmen gekennzeichnet. Doppelförderungen und Förderkonkurrenz
sind mögliche unerwünschte Nebenwirkungen eines solchen Fördersystems. Umso wichtiger
wird aber die Berücksichtigung der Einbettung des zu evaluierenden Programms in die
bestehende Förderlandschaft, d.h. eine Portfolioevaluierung. Diese sollte vermehrt
Berücksichtigung finden, um den Instrumentenmix zumindest in einem iterativen Prozess
aufeinander abzustimmen.
� Verbesserung der Qualität und des Nutzens von Evaluierungen durch konzise und
akkordierte Formulierung der „Terms of References“ (ToR). Die in den Ausschreibungen von
Evaluierungen formulierten Anforderungen und evaluatorischen Fragestellungen (Terms of
References) haben einen zentralen Einfluss auf die Qualität von Evaluierungen. Die Studie
kommt zu dem Ergebnis, dass die ToR noch weiter verbessert werden können. Drei
Maßnahmen hierzu sind: (1) die Einbeziehung der Förderagenturen in den Prozess der
Formulierung der ToR, (2) die klare Arbeitsteilung zwischen Festlegung der ToR durch die
Auftraggeber von Evaluierung und die Entscheidung über die Methode durch die
EvaluatorInnen sowie (3) realistische Ansprüche an den Umfang der zu beantwortenden
Fragen.
� Klare Zielformulierung in der Programmkonzeption als Voraussetzung für
Wirkungsabschätzung. Wirkungsanalysen brauchen eindeutig definierte und messbare Ziele,
die den EvaluatorInnen Aussagen in Bezug auf relevante Veränderungen und Wirkungen
ermöglichen. Werden Ziele zu abstrakt formuliert (z.B. Steigerung der Wettbewerbsfähigkeit)
erschwert bzw. verunmöglicht dies die Wirkungsabschätzung.
� Verstärkte Reflexion von sozioökonomischen Indikatoren. Um die Auswirkungen von
Programmen umfassend zu analysieren, sollten auch Wirkungstypen die über ökonomische
Effekte hinausgehen (z.B. ökologische Nachhaltigkeit, Nutzerfreundlichkeit, Gender Equality,
Public Awareness ) in die Wirkungsanalyse einbezogen werden. Hierfür gibt es jedoch noch
wenige bis keine allgemein akzeptierten Indikatoren – diese müssen sowohl in Bezug auf die
unmittelbaren Ziele sowie den Inhalt und Kontext des Programms formuliert und reflektiert
werden. Sollten solche Ziele in Programmen vorkommen bzw. der Evaluierung gewünscht sein,
müssten sie dafür im Kontext des jeweiligen Programmes geeignet operationalisiert werden. In
der Entwicklung neuer Metriken für die sozio‐ökonomischen Indikatoren liegt ebenfalls eine
Herausforderung für die Zukunft.
� Mehr lernen von Evaluierungen durch breite und öffentliche Diskussion. Um den Einfluss von
Evaluierungen zu erhöhen, ist eine breite und möglichst zeitnahe Veröffentlichung von
Evaluierungen wünschenswert.
9