9 Bilag 1: <strong>Evaluering</strong>ens metode – udvidet9.1 Forkortelser og <strong>for</strong>klaringerFølgende <strong>for</strong>kortelser er relevante <strong>for</strong> rapporten:AFAVUCUECVUERFAEUDHFFVUINMKVINFOLOMenteeMentorMIPGUSOSUUUUVMVUCArbejds<strong>for</strong>midlingen (nu staten i jobcentret)Almen Voksen Uddannelse (de to trin i AVU svarer til folkeskolens 9.-10. kl.)Center <strong>for</strong> Undervisning og ErhvervCenter <strong>for</strong> Videregående Uddannelse (f.eks. seminarium)Erfarings(-udvekslingsgruppe)Erhvervsuddannelse (2-5 år, en blanding <strong>af</strong> skoleundervisning og praktik)Højere Forberedelseseksamen (toårig gymnasial uddannelse)Forberedende Voksen Uddannelse (opkvalificering <strong>for</strong> kortuddannede voksne)Ministeriet <strong>for</strong> Flygtninge, Indvandrere og Integration (Integrationsministeriet)Et landsdækkende in<strong>for</strong>mations- dokumentations- og kulturcenter, som <strong>for</strong>midlerkvinde- og køns<strong>for</strong>skningens resultater til offentlighedenLandsorganisationen i <strong>Danmark</strong>En person, der bliver rådgivet eller vejledt <strong>af</strong> en mentorRådgiver, uddannelsesguide eller vejlederMange Intelligenser (Howard Gardner’s teori om 7 intelligenser og læringsstile)Pædagogisk Grund UddannelseSocial- og SundhedsskoleUngdommens Uddannelsesvejledning (45 centre i <strong>Danmark</strong>)UndervisningsministerietVoksenUddannelsesCenter (her undervises i bl.a. AVU, FVU og HF)9.2 Metode og dataindsamling til evalueringen<strong>Evaluering</strong> betyder at bestemme eller fastsætte værdi <strong>af</strong> noget. Den metodiske tilgang til denneevaluering <strong>af</strong> Puljen <strong>for</strong> uddannelsesguides er summativ, hvilket vil sige, at det er en såkaldteffektmåling, der <strong>af</strong>dækker <strong>pulje</strong>ns resultater i <strong>for</strong>hold til det oprindeligt planlagte i <strong>for</strong>målsredegørelserne.Derudover vil projekternes tilfredshed og erfaringer med processen og <strong>for</strong>løbetblive fastlagt.Der er anvendt en kombination <strong>af</strong> kvantitative og kvalitative undersøgelser i dataindsamlingentil evalueringen. Det giver efter evaluators vurdering det bedste billede <strong>af</strong> genstandsfeltet.9.2.1 Kvalitative metoderDen kvalitative metode anvendes i <strong>for</strong>bindelse med fem caseprojekter, som har modtaget støttefra Puljen <strong>for</strong> uddannelsesguides. Evaluator har medtaget casestudier <strong>af</strong> <strong>for</strong>skellige årsager. Somnævnt er det <strong>for</strong> det første vigtigt at <strong>for</strong>tælle gode historier i <strong>for</strong>bindelse med projekter somdisse, så andre projekter kan lære <strong>af</strong> de metoder og erfaringer, caseprojekterne har gjort sig. Fordet andet har evaluator brugt casestudierne til fra en kvalitativ vinkel at undersøge, om projekterneleverer kvalitet og lever op til de <strong>for</strong>mål, som <strong>Integrationsministeriets</strong> <strong>pulje</strong> <strong>for</strong> uddannel-<strong>Evaluering</strong> <strong>af</strong> Puljen <strong>for</strong> uddannelsesguides | Bilag 1LXP Consulting83
sesguides opererer med. Derudover har <strong>for</strong>målet været så vidt muligt at ”gå i dybden” med femprojekter <strong>for</strong> at undersøge, om de efterlever det, de har skrevet i ansøgningen om <strong>pulje</strong>midlernesamt i deres status- og evalueringsrapporter.Analysestrategisk er overvejelserne gået på at udvælge caseprojekter, der frivilligt vil deltage iundersøgelsen. Casestudierne er baseret på desk research, telefoninterview og primært kvalitativeinterview og fokusgruppeinterview hos de fem caseprojekter. Alle fem projekter har h<strong>af</strong>tbesøg <strong>af</strong> evaluator til en dags interview med de unge/eleverne/mentees, undervisere/mentorer/uddannelsesguides samt projektledelserne. Udvælgelsen <strong>af</strong> caseprojekter er ikke tilfældigog repræsentativ, men <strong>for</strong>etaget subjektivt <strong>af</strong> Integrationsministeriet og LXP Consulting isamarbejde <strong>for</strong> at trække de gode historier frem.Interviews, som tager udgangspunkt i den kvalitative metode, kan gå mere i dybden eller ud ad”nye veje” og undersøge årsager til resultater fra en eventuel spørgeskemaundersøgelse. Interviewskan også bruges til at få mere viden og dermed større kvalitet i en eventuel spørgeskemaundersøgelse.Formålet med interview som metode er at frembringe konkrete oplevelser oghændelses<strong>for</strong>løb fra projektet. Metodisk er der tale om semistrukturerede dybdeinterviews meden på <strong>for</strong>hånd udarbejdet spørgeguide. Interviewerens rolle er den <strong>for</strong>domsfri lyttende og <strong>for</strong>tolkendesamtalepartner, og dialogen er i centrum. Traditionelt er interviewet en værdsat lejlighed<strong>for</strong> interviewpersonen til at få sat ord på sin livssituation og derigennem nå til erkendelser omkringdenne.Fokusgruppeinterviewene anvendes i <strong>for</strong>søget på at styrke det innovative element ved, at flerefolk tænker og agerer på samme tid. Dermed kan det lykkes at frembringe sandheder, som måskeikke vil komme frem via enkeltinterviews. Karakteristisk <strong>for</strong> fokusgruppeinterviewet somdataindsamlingsmetode er, at der er tale om en produktion <strong>af</strong> viden, der er <strong>af</strong>hængig <strong>af</strong> selveinteraktionen i gruppen, og som der<strong>for</strong> er vanskelig at opnå gennem andre kvalitative og kvantitativemetoder. Desuden er fokusgruppeinterviewet en ressourcebesparende metode, hvor manhurtigere end i enkeltinterviews kan få flere menneskers holdninger og erfaringer indsamlet.9.2.2 Kvantitative metoderI spørgeskemaerne bliver respondenterne bedt om at tage stilling til emner som indfrielsen <strong>af</strong><strong>pulje</strong>ns <strong>for</strong>mål, de <strong>for</strong>skellige aktiviteter, underviserne og den modtagne in<strong>for</strong>mation. Derudoverhar de svaret på nogle faktuelle spørgsmål om deres køn, alder, baggrund og uddannelsesniveau.Afrunding kan medføre, at tallene i rapportens tabeller og figurer ikke summer til totalen. Desudener nogle <strong>af</strong> beregningerne i rapporten <strong>for</strong>etaget på baggrund <strong>af</strong> <strong>af</strong>rundede tal.Metodisk må et spørgeskema hverken være ledende eller ladet med positive eller negative udtryk.Spørgsmålene skal være klart og præcist <strong>for</strong>muleret og tilpasses målgruppens sprogbrug,hvor det er muligt. Et spørgeskema er ofte et middel <strong>for</strong> respondenterne til anonymt at kommetil orde over <strong>for</strong> deres ledelse eller uddannelsesinstitutionen. Der<strong>for</strong> er det vigtigt, at emnerneblandt andet giver mulighed <strong>for</strong>, at man kan komme ud med sin begejstring eller <strong>af</strong> med sinefrustrationer i <strong>for</strong>bindelse med projektet.Formålet med <strong>Integrationsministeriets</strong> <strong>pulje</strong> <strong>for</strong> uddannelsesguides vil blive evalueret ud fra engradueringsskala, som LXP Consulting opererer med i sine undersøgelser og evalueringer. Noglemål er mere målbare end andre. Omkring indfrielsen <strong>af</strong> målene er det ikke muligt at svare<strong>Evaluering</strong> <strong>af</strong> Puljen <strong>for</strong> uddannelsesguides | Bilag 1LXP Consulting84