Kursbuch Wirkung - Das Praxishandbuch für alle, die Gutes noch besser tun wollen

Wichtig zu wissen:
Was sind Kontrollgruppen?
Eine Kontrollgruppe ist eine
Gruppe, die im Rahmen einer
Evaluation Daten für den
Vergleich mit der Gruppe, die
an einem Projekt teilgenommen
hat, liefert. Die
Kontrollgruppe nimmt an dem
Projekt nicht teil. Damit ist ein
Vergleich mit der Teilnehmergruppe
möglich, und es
können Aussagen zur
Wirksamkeit des betreffenden
Projekts abgeleitet werden.
Die Kontrollgruppe ist ein
Kriterium für die Aussagekraft
und Belastbarkeit von
Evaluationsergebnissen, da
sonst eine dem Projekt
zugeschriebene Wirkung auch
auf anderen Ursachen
beruhen könnte. Eine
Wirkungsevaluation mit
Kontrollgruppen ist allerdings
sehr aufwändig und wird
relativ selten durchgeführt.
6.2 SCHWER ZU ERHE-
BENDE WIRKUNGEN
Wirkungen nachzuweisen, kann aus den
unterschiedlichsten Gründen eine große
Herausforderung sein. Im Folgenden werden
einige Beispiel für schwer zu erhebende Wirkungen
dargestellt und beschrieben, welche
Möglichkeiten der Wirkungsanalyse es in
diesen Fällen gibt.
Herausforderung: Wirkungen nachweisen,
die erst nach längerer Zeit eintreten
Viele soziale Projekte zielen auf Wirkungen,
die erst nach einiger Zeit eintreten. Um hier
Aussagen treffen zu können, müssen Daten
nach dem Ende des Projekts, beziehungsweise
nachdem ein Teilnehmender seine Teilnahme
am Projekt beendet hat, erhoben werden.
Dies ist in vielen Fällen eine große Herausforderung,
denn es ist oft sehr schwer und
aufwändig, die ehemaligen Teilnehmer nach
längerer Zeit wieder zu kontaktieren. Hier
ist eine gute Pflege der Kontaktdatenbank
nützlich und es ist hilfreich, den Teilnehmern
schon bei Projektabschluss anzukündigen,
dass man sie nach einiger Zeit noch mal kontaktieren
möchte. Eine weitere Herausforderung
ist es, nachzuweisen, dass die Langzeitwirkungen
auf die Aktivitäten des Projekts
zurückzuführen sind. Denn in der Zeit
zwischen dem Ende der Teilnahme am Projekt
und dem Eintreten der Langzeitwirkung hat
eine Vielzahl an Einflüssen die Entwicklung
des (ehemaligen) Teilnehmers beeinflusst.
In den allerseltensten Fällen werden hier
Wirkungsevaluationen mit Kontrollgruppen
durchgeführt. Im Rahmen der Befragung der
ehemaligen Teilnehmenden kann man hier die
Befragten bitten, selbst einzuschätzen, wie
groß der Einfluss des Projekts auf ihre jetzige
Situation ist. Auch lässt sich hier mit der
Wirkungslogik und Wirkungsnachweisen, die
während der Teilnahme am Projekt erhoben
wurden, argumentieren. Wenn während des
Projekts festgestellt wurde, dass bei den
Teilnehmern Wirkungen auf den Outcome-
Stufen 4 (Veränderungen im Wissen) und 5
(Veränderungen im Verhalten und Handeln)
eingetreten sind, so kann mit einer gewissen
Sicherheit angenommen werden, dass das
Projekt auch Einfluss auf die langfristigen
Wirkungen im Bereich der Lebenssituation
(Outcome-Stufe 6) hatte.
Herausforderung: Teilnehmende wollen
oder können nicht befragt werden
In einigen Projekten ist es schwierig, die Teilnehmenden
zu befragen. Die Gründe hierfür
sind unterschiedlich: Einige Zielgruppen
haben Vorbehalte, an Erhebungen teilzunehmen,
weil sie befürchten, dass ihnen dadurch
Nachteile entstehen können. Beispiele sind
hier Personen, die von Gewalt betroffen
oder in Straftaten involviert sind. Hier ist es
wichtig, den Befragten absolute Anonymität
zuzusichern und zu gewährleisten. Andere
Zielgruppen sind selbst nicht in der Lage, im
Rahmen von Erhebungen Auskünfte zu erteilen
(zum Beispiel Kleinkinder oder schwer an
Demenz erkrankte Menschen). Hier kann es
ein möglicher Weg sein, ihnen nahestehende
Personen (wie Eltern oder pflegende Angehörige)
zu befragen.
82 © PHINEO gAG 2013, www.phineo.org – Kursbuch Wirkung