27.07.2013 Views

Metoder og instrumenter til effektvurdering af indsatser over for ...

Metoder og instrumenter til effektvurdering af indsatser over for ...

Metoder og instrumenter til effektvurdering af indsatser over for ...

SHOW MORE
SHOW LESS

You also want an ePaper? Increase the reach of your titles

YUMPU automatically turns print PDFs into web optimized ePapers that Google loves.

Ordet reliabilitet bruges således som en generel betegnelse <strong>for</strong> datas pålidelighed.<br />

Reliabilitet bruges d<strong>og</strong> <strong>og</strong>så som en mere specifik teknisk term, der referer <strong>til</strong><br />

korrelationen mellem sæt <strong>af</strong> observationsværdier – fx to eller flere individers<br />

bedømmelse <strong>af</strong> et antal objekter. Her står reliabiliten i modsætning <strong>til</strong> begrebet<br />

enighed, <strong>og</strong> denne sondring er væsentlig, idet man godt kan have en høj reliabilitet,<br />

men en ringe enighed. Denne situation kan fx opstå ved, at der er en systematisk<br />

bias i den ene observatørs vurdering <strong>af</strong> en situation, så denne konsekvent<br />

bedømmer fx et punkt anderledes på en skala end en anden observatør. Korrelation<br />

mellem de to observatører er lig 1, som er lig perfekt reliabilitet - dette <strong>til</strong> trods <strong>for</strong><br />

at der ikke er enighed mellem de <strong>af</strong>givne bedømmelser.<br />

Når der tales om reliabilitet, skelner man traditionelt set mellem fire begreber.<br />

Disse er: test-retest reliabilitet, intern konsistens, interrater reliabilitet, <strong>og</strong><br />

reproducerbarhed (CR), <strong>og</strong> hver <strong>af</strong> disse reliabilitetstests fremkommer med<br />

<strong>for</strong>skellige koefficienter <strong>for</strong> reliabiliteten.<br />

Tabel 1. Oversigt <strong>over</strong> de mest almindelige reliabilitetstyper<br />

Reliabilitetstype Definition/beskrivelse Anvendelig <strong>for</strong><br />

Test-retest Graden <strong>af</strong> <strong>over</strong>ensstemmelse mellem to Alle målingstyper<br />

målinger <strong>af</strong> det samme fænomen under (dvs. både enhed <strong>og</strong><br />

den <strong>for</strong>udsætning, at fænomenet ikke<br />

har ændret sig. Test-retest reliabilitet<br />

siger n<strong>og</strong>et om en tests eller et<br />

instruments stabilitet <strong>over</strong> tid. Svarer<br />

<strong>til</strong> intra-rater reliabilitet.<br />

multi-itemsskalaer)<br />

Intern konsistens Graden hvori alle items i skalaen måler Multi-item (Likert<br />

(fx<br />

det samme underliggende begreb, eller skalaer)<br />

målt ved<br />

konvergensen <strong>af</strong> items på det begreb,<br />

Cronbach’s alpha) der måles. Koefficienten stiger, jo<br />

mere hom<strong>og</strong>ene de målte items bliver,<br />

ligesom den stiger, jo flere items der<br />

medtages i skalaen.<br />

Inter-rater Graden hvori en observatørs vurdering Observatørvurderede<br />

er konsistent med en anden observatørs målinger<br />

vurdering i samme måleseance.<br />

Reproducerbarheds- Reflekterer graden ved hvilken en Guttman skalaer<br />

Koefficient persons item respons kan <strong>for</strong>udsiges<br />

15

Hooray! Your file is uploaded and ready to be published.

Saved successfully!

Ooh no, something went wrong!