Outputorientierte Evaluierung

Output‐orientierte Evaluierung öffentlich geförderter FTI‐Programme
� Verbesserung der Datenlage für Evaluierungszwecke. Die Verbesserung der Datenlage stellt
eine wesentliche Vorbedingung für wirkungsorientierte Evaluierung von FTI‐Politik dar. Die
Situation bezüglich Datenlage ist nicht nur in anderen Ländern (z.B. DEU, FIN, CH), sondern
auch in anderen Politikfeldern (Arbeitsmarkt‐, Exportstatistiken) in Österreich deutlich besser.
Daten, die mit öffentlichen Mitteln erhoben wurden sollten für die Kontrolle der staatlichen
Mittelverwendung eingesetzt werden können (wie der Community Innovation Survey oder die
F&E‐Erhebung) und in Form anonymisierter Mikrodaten zugänglich gemacht werden. Die
Möglichkeit zur Verknüpfung mit weiteren Sekundärdatenquellen ist ebenfalls eine
notwendige Voraussetzung für die Anwendung von state‐of‐the‐art Methoden der
Evaluationsforschung. Gegebenenfalls sind Änderungen der rechtlichen Grundlagen des
Datenzugangs in Österreich anzustreben.
� Verbesserte Abstimmung der Programme und Instrumente durch vermehrte
Portfolioevaluierung. Das österreichische Innovationsförderungssystem ist durch eine Vielzahl
an Akteuren und Programmen gekennzeichnet. Doppelförderungen und Förderkonkurrenz
sind mögliche unerwünschte Nebenwirkungen eines solchen Fördersystems. Umso wichtiger
wird aber die Berücksichtigung der Einbettung des zu evaluierenden Programms in die
bestehende Förderlandschaft, d.h. eine Portfolioevaluierung. Diese sollte vermehrt
Berücksichtigung finden, um den Instrumentenmix zumindest in einem iterativen Prozess
aufeinander abzustimmen.
� Verbesserung der Qualität und des Nutzens von Evaluierungen durch konzise und
akkordierte Formulierung der „Terms of References“ (ToR). Die in den Ausschreibungen von
Evaluierungen formulierten Anforderungen und evaluatorischen Fragestellungen (Terms of
References) haben einen zentralen Einfluss auf die Qualität von Evaluierungen. Die Studie
kommt zu dem Ergebnis, dass die ToR noch weiter verbessert werden können. Drei
Maßnahmen hierzu sind: (1) die Einbeziehung der Förderagenturen in den Prozess der
Formulierung der ToR, (2) die klare Arbeitsteilung zwischen Festlegung der ToR durch die
Auftraggeber von Evaluierung und die Entscheidung über die Methode durch die
EvaluatorInnen sowie (3) realistische Ansprüche an den Umfang der zu beantwortenden
Fragen.
� Klare Zielformulierung in der Programmkonzeption als Voraussetzung für
Wirkungsabschätzung. Wirkungsanalysen brauchen eindeutig definierte und messbare Ziele,
die den EvaluatorInnen Aussagen in Bezug auf relevante Veränderungen und Wirkungen
ermöglichen. Werden Ziele zu abstrakt formuliert (z.B. Steigerung der Wettbewerbsfähigkeit)
erschwert bzw. verunmöglicht dies die Wirkungsabschätzung.
170