Metoder og instrumenter til resultatmåling af indsatser over for ...

Reliabilitet
Reliabilitet udtrykkes ofte ved test-retest reliabilitet eller, hvor der ikke er
tidsforskel mellem observationerne, ved en split-half koefficient, som udtrykker
korrelationen mellem den ene og den anden halvdel af items i en skala. Den
hyppigst anvendte koefficient er Chronbach’s alpha koefficient. Der er imidlertid,
som påpeget af Bech (2002), nogle problemer med anvendelsen af Chronbach’s
alpha koefficient. Således vil en høj værdi af koefficienten kunne skyldes, at alle
items er lige svære. Endvidere kan selve skalaens længde bidrage til en høj
koefficient, idet antallet af items indgår i formlen. Herudover indikerer Cronbach’s
alpha ikke nødvendigvis endimensionalitet, da alpha er en funktion af item
kovarians. Kovarians mellem items kan således definere mere end én faktor i en
faktoranalyse
Den klinimetriske analyse-tilgang til vurderingen af en skalas egenskab anvender
som regel den ikke-parametriske item-response-teori analyse (Mokken-analyse)
eller Rasch-analyse (parametrisk item-respons analyse) (Bech, 2002). En kort
beskrivelse af Mokken- og Rasch-analyse gives i afsnit 1.A.
Ekstern validitet
Den eksterne validitet i den klinimetriske tilgang kan opdeles i kriterier, der
vedrører dels screeningsskalaer, dels behandlingseffekt skalaer. Kriterierne
omfatter hhv. skalaernes sensitivitet og specificitet (for diagnostiske screenings
skalaer), samt lydhørhed over for ændring (eng: responsiveness) og følsomhed
(eng: sensitivity) (for behandlingsskalaer). En skalas lydhørhed over for en
ændring refererer til dens evne til at måle ændringer i en patients symptomatologi i
en behandlingsperiode. En skalas følsomhed drejer sig om, hvorvidt en skala kan
diskriminere mellem en aktiv terapi og ’placebo’. Dette kan vurderes ved en
effektstørrelse, der viser størrelsen af forbedringen i en skalas score i en given
behandlingstid, når en aktiv behandling sammenlignes med inaktiv behandling, og
kan defineres som den gennemsnitlige forskel divideret med spredningen.
50