Zwischenbilanz Wirksamkeitsdialog - Landesjugendring NRW e.V.

Erhebungsmethoden der Evaluationen
Wie die vorangegangenen Ausführungen bereits deutlich
gemacht haben, wurden in einem Großteil der Evaluationsprojekte
Fragebogen eingesetzt. Diese Instrumente wurden
in den einzelnen Verbänden selbst entwickelt, um die
konkrete Fragestellung des Verbandes abbilden zu können.
Die meisten Fragebogen richteten sich an die teilnehmenden
Jugendlichen, viele Verbände bezogen gleichzeitig aber
auch die begleitenden Teamerinnen und Teamer – insbesondere
die jungen Ehrenamtlichen – in ihre Erhebung mit
ein. Die Befragung beider Gruppen ermöglichte es, die
Sichtweisen miteinander zu vergleichen und mit den eingeleiteten
Maßnahmen beiden Gruppen Rechnung zu tragen.
Die Befragung beider Zielgruppen war ein häufiges
Vorgehen bei den Evaluationen.
Auch der Zeitpunkt von Befragungen wurde variiert. Mit
Fragen vor Beginn von Veranstaltungen konnten die Erwartungen
der Teilnehmerinnen und Teilnehmer erfasst
werden. Befragungen am Ende dienten der Bewertung von
Angeboten und mit Hilfe von Befragungen, die in einigem
Abstand zu den Veranstaltungen durchgeführt wurden,
konnte beispielsweise die Praxistauglichkeit von vermittelten
Inhalten bei den Teilnehmerinnen und Teilnehmern
überprüft werden. Letzteres Vorgehen wurde z.B. für die
Evaluation von Aus-, Fort- und Weiterbildungsangeboten
gewählt.
Der wiederholte Einsatz ein- und desselben Instrumentes
wurde ebenfalls von einigen Verbänden vorgenommen. Auf
diese Weise konnten die Ergebnisse aus verschiedenen Jahren
miteinander verglichen werden und z.B. die Wirkung zwischenzeitlich
eingeleiteter Maßnahmen überprüft werden.
Elke Bruckner / Wirksamkeitsdialog in der Jugendverbandsarbeit – eine Zwischenbilanz
Das am häufigsten eingesetzte
Instrument im Rahmen der verbandsspezfischen
Evaluationen war der
Fragebogen.
Die Zahl der Befragten variierte zwischen den einzelnen
Evaluationen sehr stark. Teilweise wurden nur wenige Personen
aus einer Zielgruppe befragt, sodass die Ergebnisse
allenfalls als Fallstudie dienen konnten, die weitere Hinweise
für größere Befragungen erbringen konnte. Gerade kleine
Verbände, die ausschließlich ehrenamtlich geführt werden,
konnten nur geringe Fallzahlen dokumentieren. Große Verbände
hatten dagegen eher die Möglichkeit, Totalerhebungen
in ihren Angeboten durchzuführen und auf diese Weise
umfangreiches Datenmaterial zu sammeln. Große Fallzahlen
ermöglichten dann auch die Auswertung von Ergebnissen
für Untergruppen wie z.B. Jungen und Mädchen oder verschiedene
Altersgruppen.
Insbesondere bei Organisationsuntersuchungen kamen aber
auch andere Methoden als standardisierte Befragungen
zum Einsatz. So erfolgte z.B. die Untersuchung der Umsetzung
von Evaluationsergebnissen des BDKJ aus dem Jahr
2004 u.a. anhand von Textanalysen relevanter Protokolle
und Veröffentlichungen sowie mit Hilfe von Leitfadeninterviews
mit politisch Verantwortlichen in den Untergliederungen
des Verbandes. Auch Gruppeninterviews oder
halbstandardisierte telefonische Befragungen kamen als
Methoden bei den Evaluationsprojekten zum Einsatz. Gerade
bei der Verwendung qualitativer Methoden wurden häufig
mehrere Verfahren der Datenerhebung miteinander kombiniert,
wie das oben genannte Beispiel einer Kombination
von Textanalysen und Leitfadeninterviews deutlich macht.
39