Metoder og instrumenter til resultatmåling af indsatser over for ...

More documents

Recommendations

Info

Test-retest reliabilitet. De samme undersøgelsesenheder (individer) udsættes for den samme måling to gange i træk, og korrelationen mellem de 2 sæt måleresultater bestemmer reliabiliteten. Test-retest reliabiliteten angiver således et måleinstruments evne til at producere konsistente resultater, når måleinstrumentet benyttes igen under samme betingelser. Test-retest reliabiliteten af en skalas scorer har en tendens til at være højere end reliabiliteten af de enkelte items (McColl et al, 1997, p. 16). Resultatet angiver således stabiliteten – eller manglen på samme. Der findes ingen faste regler for tidsrummet mellem de to besvarelser, og denne kan derfor variere på tværs af valideringsundersøgelser. Hvis der er for kort tid mellem besvarelserne, kan respondenterne måske huske besvarelserne på første måling, og det kan resultere i en meget høj korrelationskoefficient, som måske ikke afspejler instrumentets faktiske pålidelighed. Omvendt gælder, at hvis varigheden mellem de to besvarelser er relativ lang, kan der være sket en faktisk ændring (fx i velværen, livskvaliteten eller i et andet parameter). En lav test-retest korrelation over lang tid er således ikke nødvendigvis udtryk for en lav reliablilitet, men kan være udtryk for, at instrumentet er følsomt over for ændringer. Der kan derfor opstilles to betingelser for test-retest undersøgelsen: • at disse skal udføres med et tidsinterval, der gør, at respondenterne ikke kan huske besvarelserne, • men indenfor en tidsperiode, så tilstanden ikke er forværret/ændret. Hvis disse forudsætninger ikke er opfyldte, giver beregningen af test-retest korrelationskoefficienterne ingen mening. Intern konsistens. En anden ofte anvendt metode til vurderingen af instrumenters reliaibilitet er udregningen af graden af overensstemmelse mellem spørgsmål, som hævder at måle det samme - også kaldet skalaens interne konsistens. Intern konsistens reliabilitet anvendes kun for multiitem Likert skalaer, som fremkommer ved at addere flere items, som har en lignende responsskala (Stewart, 1990, p. 6). Mål for intern konsistens er baseret på en enkel gennemførelse af testen. Her korrelerer man spørgsmål, der adresserer samme dimension. Det forventes, at 16
esultaterne for hvert af spørgsmålene vil korrelere med hinanden, såfremt disse er placeret korrekt i samme skala. Grundlæggende er det homogeniteten af de forskellige items, man ønsker at undersøge for, dvs. i hvilken grad de forskellige items i en skala måler den samme egenskab. Homogenitet kan måles med: split halves, Kuder-Richardson, eller Cronbach’s alpha, alternativt kan det måles med item-total korrelationer eller faktoranalyse. Tabel 3. Reliabilitetstests – intern konsistens Metode Beskrivelse af metoden Split halves Et begreb undersøges med flere indikatormålinger (items/spørgsmål) og korrelationen mellem svarene på eksempelvis spørgsmål med lige nummer og svarene på spørgsmål med ulige nummer beregnes som et udtryk for reliabiliteten. Hvis skalaen er intern konsistent, skulle de to halvdele korrelere højt med hinanden. Et problem ved denne tilgang er, at korrelationen er en underestimering af skalaens reliabilitet, idet reliabiliteten af en skala er direkte proportional med antallet af items (observationer), der er indeholdt deri. Reliabilitetskoefficienten for den interne konsistens afhænger således af: • graden, hvori items har noget fælles, samt • antallet af items i skalaen. Ved et split halveres længden heraf. Dette kan dog korrigeres med Sperman-Browns ’prophesy formel’ (jf. fx Streiner, 1995, p. 63). Et af problemerne med denne test er dog, at der er mange måder, hvormed man kan dele, samt denne metode ikke siger noget om, hvilke(n) items der er med til at give en evt. lav Kuder- Richardson 20 (KR-20) Cronbach’s alpha (koefficient α) reliabilitet. Denne test tager hånd om problemerne ved ovenstående tests. Den er anvendelig for skalaer indeholdende items, som besvares dikotomt. n ⎛ Formlen for Kurder-Richardson er: KR − 20 = ⎜ − n − 1 ⎜ ⎝ T 1 2 σ 17 ∑ pq i i hvor n er antallet af items, pi er andelen, som svarer korrekt på spørgsmål i, qi = (1-p) for hvert item, og σT er standardafvigelsen på den totale score (Streiner, 1995, p. 64). Cronbachs alpha er en udvidelse af Kuder-Richardson testet, der kan anvendes, hvis der er mere end to responsalternativer. Såfremt alpha anvendes på dikotome udfald, vil resultatet være lig det resultat, Kuder-Richardson fremkommer med. Formlen ⎞ ⎟ , ⎠
Page 1 and 2: Metoder og instrumenter til resulta
Page 3 and 4: Forord Projektet ”Metoder og inst
Page 5 and 6: Instrumenter til måling af sundhed
Page 7 and 8: til effektvurdering, blive gennemg
Page 9 and 10: 2) Mesoniveauet. Repræsenterer en
Page 11 and 12: demens. Her vil det ofte være mere
Page 13 and 14: 1.4.1. Reliabilitet (pålidelighed)
Page 15: p2), hvor p1 er sandsynligheden, og
Page 19 and 20: teknikker til at undersøge for den
Page 21 and 22: meget små populationer (McDowell,
Page 23 and 24: Konvergent validitet Korrelerer et
Page 25 and 26: Begrebsvaliditeten udtrykker derfor
Page 27 and 28: 1.4.3. Diskriminationsstyrke og fø
Page 29 and 30: hvad instrumentet tillader. Omvendt
Page 31 and 32: Figur 1: Illustration af et domæne
Page 33 and 34: gøres lettere at besvare spørgsm
Page 35 and 36: Ratioskala (forholdstal): Denne ska
Page 37 and 38: altid samme mening? Påvirker tal u
Page 39 and 40: 1.7. Praktiske overvejelser Ud over
Page 41 and 42: Et eksempel på et kulturelt proble
Page 43 and 44: • Hvis nødvendigt, udfør pilots
Page 45 and 46: 16. Meadows, K. N. Bentzen, F. Touw
Page 47 and 48: 44. Reisberg, B. E. Franssen, L. So
Page 49 and 50: Figur 1A. Psykometrisk skala-analys
Page 51 and 52: I den klassiske begrebsterminologi
Page 53 and 54: skalering er probabilistisk 11 af n
Page 55 and 56: ICC har visse fælles kendetegn •
Page 57 and 58: Bilag 2: Ordliste 14 Cronbach’s a
Page 59 and 60: Inter-item korrelationer: Anvendes
Page 61 and 62: Multitræk-multi metode (multitrait
Page 63: for depression deri, men ikke nødv

Metoder og instrumenter til resultatmåling af indsatser over for ...

You also want an ePaper? Increase the reach of your titles

Delete template?

Save as template?