EVALUERING AF LOKALE UDVIKLINGSPROCESSER

den er netop effektevaluerings styrke, da modellen kan anvendes i situationer,
hvor der er uklare mål, uenighed om mål, ”parademål”, symbolske
mål eller mål, der er vanskelige at operationalisere. Men modellens styrke
er samtidig dens svaghed. Det brede udefinerede resultatbegreb kan gøre
det vanskeligt at fastlægge de præcise kriterier for evalueringen. Ofte er
der ikke en styrende teori for, hvad man skal ”kigge efter” i en effektevalueringsproces,
hvilket betyder, at det kan være vanskeligt at få hånd om
det relevante.
Derfor rejser effektevaluering to centrale spørgsmål. Det drejer sig om,
hvorvidt de isolerede effekter er i overensstemmelse med interventionens
officielle hensigter, samt hvorvidt de opnåede effekter reelt er en følge af
interventionen. Spørgsmålene medfører, at ideelt set alle forhold, der i
princippet påvirker interventionen, bør isoleres og inddrages i evalueringen.
Men effektevaluerings ambition om at vurdere disse forhold, altså
hvorvidt resultaterne og effekterne faktisk er en funktion af interventionen,
er vanskeligt at afgøre og kræver, at der sættes fokus på tre områder:
1) at der udarbejdes en teori eller model for sammenhængen mellem
årsag og virkning, 2) at der gennemføres en analyse af de isolerede ikketilsigtede
effekter samt, 3) at de isolerede effekter forsøges beskrevet på
kort- og lang sigt.
Imødekommes disse tre forhold i det omfang, konteksten tillader det, er
der åbnet op for muligheden af, at en effektevaluering kan generere den
viden, der er et centralt mål i et evidens- og effektstudie. Dvs. evidensbaseret
viden om, hvad det er i et projekt, der virker.
Som illustreret er virknings-evaluering ikke væsensforskellig fra tidligere
evalueringsmodeller, men er en udbygning og præcisering af traditionelle
effektevalueringsmodeller. Det som virknings-evalueringen tilbyder,
som ikke har været konkretiseret i traditionel effektevaluering, er, at
der indledningsvist bør opstilles en programteori for, hvordan en intervention
forventes at virke. Formålet med programteorien er at gøre det
nemmere at fokusere og få hånd om det relevante i evalueringsprocessen
– og således imødekommer virknings-evaluering den generelle kritik af
effektevaluering.
Hvad er en programteori?
Begrebet programteori består af to dele. Dels ”program” som er selve den
intervention, der evalueres, og dels ”teori” i form af de forventninger til
interventionens sammenhænge mellem årsag og virkning samt begrundelser
for, hvorfor interventionen forventes at skabe en virkning i form af
EVALUERING AF LOKALE UDVIKLINGSPROCESSER 25