Skript Evaluationsmethoden von der Angelika N. - Seelensammler

EvaluationsmethodenLengenfelder SoSe 2009Qualitative Verfahren• Sammelbegriff für Verfahren, mit niedrigen Anforderungen an das Messniveau• Analysen auf Nominalskalen-Niveau• Hermeneutische Methoden• = Nicht-quantitativ: Subjektive Interpretationen, Verstehenserlebnisse• Hohen Auswertungsaufwand einplanen und kontrollieren ob Kompetenzvorhanden• Einsatz vor allem in Formativen EvaluationenKonfigurale Techniken Es werden Konfigurationen in den nominalskalierten Daten gesucht, weilquantitative Bewertung nicht möglich. Ergeben letztendlich Wenn-Dann Sätze → leichtverständliche, zugängliche Ergebnisse. Problem: Exponentiell steigende Anzahl möglicherKonfigurationen.Strukturierungshilfen Verfahren der Inhaltsanalyse, die über das Auszählen von Worthäufigkeitenhinausgehen. Anwendungsbereich: Offene Interviews in Bildungsevaluation, Therapieevaluation,etc. Erstellen von Strukturen aus qualitativen Datenerhebungen.Verstehen In vielen geisteswissenschaftlichen Bereichen das wissenschaftliche Vorgehen. InEvalforschung von untergeordneter Bedeutung. Öffentliche Akzeptanz rein verstehender Eval-Methodik sehr gering → jeder kann dann Experte sein.Fazit:Qualitative Verfahren bzw. qualitative Daten werden in jeder Evaluation von Interesseund Nutzen sein. Alleinige Anwendung qualitativer Verfahren eher nur dort woandere Zugänge nicht möglich. Qualitative Daten liefern oft den Rahmen, umquantitative Daten einordnen und präsentieren zu können.Fazit zur Evaluations-Planung► Je nach Ursprung des Auftrags (Projekt wird einem angeboten oder man bewirbtsich um ausgeschriebenes Projekt), startet das Projektmanagement anunterschiedlichem Ausgangspunkt.► Planungsdilemma: Je genauer die Planung desto aufwändiger und teurer, dafürmeist guter Plan. Je ungenauer der Plan, desto billiger, aber auch risikoreicherbezüglich Durchführbarkeit - nicht - vorhergesehene Probleme sind finanziellnicht abgedeckt.► Je größer Projekt, desto sinnvoller ist ein großes, erfahrenes, interdisziplinäresEvaluatoren-Team.► Ersten Projekte sollten nicht alleine geplant werden (Lehrgeld).► Methodik hängt von der Fragestellung ab: Mischung aus quantitativen undqualitativen Daten (mit Schwerpunkt quantitativ) ist üblich.Es gilt:Wenn der Plan konkret, genau und gut ist kann man sich in der Durchführung auf dieEinhaltung des Plans beschränken - ohne Nachkorrektur.GestaltungsaspekteFragen die zu klären sindEvaluationsziel Warum wird evaluiert?Evaluationsbereiche In welchem gesellschaftlichen Bereich wird evaluiert?Evalutionsnutzung Wie werden die Ergebnisse aufbereitet und verwendet?-------------------------- ---------------------------------------------------------------------------Evaluationsobjekt Wer / was wird evaluiert?Evalutionsmodell Wie wird evaluiert?Evaluationsort Wo wird evaluiert?16/23