Evaluation der Umsetzung der Qualitätssicherungsrichtlinien und der

Anhang 2: Zusammenfassung der Resultate der Evaluationtigen Kontexten kann mit (i) der Integration der Forschungsagenda in die Langzeitstrategie des Amtes,(ii) mit der Einführung von Leistungsaufträgen (z.B. FLAG), (iii) mit der Einführung von Qualitätssicherungsmodellen,die die Nutzung der Resultate mit einschliessen, (vi) mit Massnahmen und Grundlagen,welche die Wirkungserzeugung fördern und überwachen, und (v) mit qualifiziertem Personal inden Institutionen, welches die Forschungsresultate verwerten kann, erfolgen.2.2. Bericht d es SWT R 'Ex terne Ev aluation der Qu alitätssicherung und Re sultatnutzung'vom November 2009 (Beilage 1)Einleitend werden im Bericht des SWTR die Definitionsansätze der Ressortforschung und das Vorverständnisdes SWTR zum Auftrag der Evaluation dargelegt, welches in den Empfehlungen an denSteuerungsausschuss-BFT stark zum Ausdruck kommt. Ein weiterer Teil befasst sich mit der internationalenPerspektive der Ressortforschung und deren Evaluation im internationalen Kontext. DerSWTR stellt fest, dass kaum internationale Überblicksliteratur über die Evaluationspraktiken der Ressortforschungexistiert und die Ressortforschungsevaluation international wenig entwickelt ist. DieRessortforschung in der Schweiz zum Zeitpunkt der Evaluation sowie die Vorgeschichte zur Evaluationund eine Kurzübersicht der Resultate der internen Evaluation werden im Bericht vorgestellt. 19Im Rahmen der externen Evaluation entschied sich der SWTR für ein mehrgleisiges Verfahren, in welchem(1) die Ressortforschung der Bundesverwaltung aus einer internationalen Perspektive beurteilt,(2) die von den Bundesstellen ausgefüllten Fragebogen der Selbstevaluation einer eigenen Auswertungunterzogen und (3) Fallstudien zur Nutzung der Forschungsresultate erstellt wurden.QualitätssicherungHinsichtlich der Strukturen und Prinzipien der Qualitätssicherung in den Bundesinstitutionen stellt derSWTR fest, dass explizite Qualitätssicherungskonzepte relativ wenig verbreitet sind (45% nach AnzahlBundesstellen, bzw. 56% nach Aufwand 20 ). Wissenschaftliche Beiräte existieren zu rund einem Drittelin den untersuchten Bundesstellen, bzw. zu 61% nach Aufwand. Der SWTR schliesst, dass Bundesstellenmit kleinem Aufwand deutlich weniger an Strukturen zur Qualitätssicherung aufweisen als diegrossen Institutionen, welche die Qualitätssicherungsrichtlinien gut umsetzen. 21Die Mandatsvergabe erfolgt fast vollständig innerhalb der vorgegebenen Normen und Protokolle. Esbleibe den Bundesstellen überlassen, was sie unter der 'Anwendung der Basisregeln gemäss Richtlinien'genau verstehen. 22 Da zwei der grossen Bundesstellen grundsätzlich keine Mandate vergebenbeläuft sich der in der Grafik angegebene Wert von 78%, bei welchem alle grossen Bundesstellen berücksichtigtwerden, auf 100%. 23In Bezug auf die Nutzung der Datenbank ARAMIS wurden die Fragen nach dem Vorhandensein vonRichtlinien zur Eingabe von Daten in ARAMIS und die Nutzung von ARAMIS zur regelmässigen Pro-19 Bericht 'Externe Evaluation der Qualitätssicherung und der Resultatenutzung durch den SWTR', S. 7-15, S. 15-24, bzw. S.24-32.20 Die Prozentzahl nach Aufwand bezieht sich auf das Verhältnis der Aufwendungen der betroffenen Bundesstellenrelativ zum Gesamtaufwand in der Ressortforschung gemäss der Datenbank ARAMIS (jährlicher Durchschnitt2004-2007).21 Anmerkung Steuerungsausschuss-BFT: Wie im Synthesebericht der internen Evaluation dargelegt, müssenSchlussfolgerungen aus der quantitativen Auswertung der geschlossenen Fragen mit der nötigen Vorsicht gezogenwerden, da die Bundesstellen ihre Antworten in den offenen Fragen häufig relativieren. So beantwortet beispielweisedas ASTRA die geschlossene Frage zum Vorhandensein von Qualitätssicherungskonzepten mit 'nein'.Das Amt relativiert aber im Kommentar, dass es über ein amtsbezogenes Qualitätssicherungskonzept verfügt,dessen Implementierung durch einen formellen Direktionsentscheid eingeleitet wurde, hingegen nicht über einspeziell auf die Forschung ausgerichtetes Qualitätssicherungskonzept.22 Anmerkung Steuerungsausschuss-BFT: Die Basisregeln werden in den Qualitätssicherungsrichtlinien desSteuerungsausschusses-BFT auf Seite 7 präzisiert.23 Anmerkung Steuerungsausschuss-BFT: Evaluationsbericht SWTR, S. 42; dieses Beispiel illustriert die Unzulänglichkeitendes Ziehens von Schlussfolgerungen anhand der quantitativen Auswertung der geschlossenenFragen.32