Skript Evaluationsmethoden von der Angelika N. - Seelensammler

EvaluationsmethodenLengenfelder SoSe 2009Utilization-focused Evaluation Patton, M.Q.• Sehr starker Focus auf die Beteiligtengruppe(n)• Developmental Evaluation: Evaluatoren müssen aktiv an der Evaluations-Nutzung arbeiten - undihren Unabhängigkeitsstatus aufgeben• Ziel: Entscheidungsfindung, Meinungsklärung, Identifizierung von Verbesserungspotentialen• Intended use bei intended users wird erreicht durch:- Overcoming staff fear- Asking the right questions- Being situationally responsive as an expert evaluator- Reection and evaluation- Being an advocate for evaluationBeitrag zur Evaluationsforschung:• Pragmatischer Ansatz - Gut ist was wirkt• Rollenwechsel beim Evaluator• Eval-Nutzen ist: Summativ, formativ und Wissensgenerierungweiter AnsätzeThe Four Levels / Kirkpatrick Erstes Konzept für die Systematisierung der anfallenden Evaluationsinformationen.Aus Trainingsevaluation. Theorie weniger wichtig als direkte Umsetzbarkeit - Daher wenig Anerkennung von derCommunity. Vier Ebenen der Zuordnung von Evaluationsergebnissen: Eb1 Reaktionsebene, Eb2 Lernerfolg, Eb3Verhalten und Eb4 Endergebnis.Empowerment Evaluation / Fetterman Unterstützung der Evaluationsbeteiligten zur Selbstevaluation.Evaluationsstarthilfe, die für die Beteiligten Kompetenzen aufbauen sollen, den Prozess zukünftig alleine zu leiten.(Empowerment = Befähigung; Hilfe zur Selbsthilfe).Ansätze im Vergleich• Einsatzgebiet unterschiedlich - je nach Fragestellung und Anforderungen• Wissenschaftlicher und Erkenntnistheoretischer Hintergrund der Personenbestimmt Ansatz• Zugang zu Evaluation kann sehr unterschiedlich sein• Wissen um unterschiedliche, erfolgreiche Zugänge kann genutzt werden, umAnforderungen zu bestimmen und danach den geeigneten Ansatz zu wählen - derHilfe und Struktur für die Planung gibt• Eigene Zuordnung zu Ansatz zeigt, dass das Vorgehen Überlegungen entspringt,die sich in die Anderer einordnen.Teil III Planung und Gestaltung von EvaluationenAufgaben der Evaluations-PlanungÜblicher Evaluationsablauf1. Definition der zu evaluierenden Maßnahme2. Zielsetzung der Evaluation3. Planung des Evaluationsprojekts4. Datenerhebung und -auswertung5. Berichtlegung6. Bewertung und weitergehender Nutzen► Projektmanagement• Informationsbeschaffung• Entwicklung eines vorläufigen Arbeitsplans• Zeit- und Kostenschätzung► Designfrage• Entwicklung eines Untersuchungsplans• Auswahl und Applikation spezifischer Datenerhebungsverfahren• Identifikation u. Überprüfung potentieller Störquellen11/23