De meerwaarde van HKZ-certificering voor GGZ-instellingen

moesten de tellers en noemers aanleveren in plaats van zelf berekende scores. (Stuurgroep
Zorgbrede Transparantie GGZ, 2007).
Problemen met het aanleveren van data bleven echter bestaan. Een evaluatiestudie van
Mediquest in 2008 naar de validiteit, betrouwbaarheid, toepassing en het gebruik, in
opdracht van de Stuurgroep Zichtbare Zorg, bracht wederom aandachtspunten naar voren.
De problemen met de diagnosegroepen, definiëringen en de onduidelijkheid of een
indicator van toepassing was voor een instelling bleven bestaan. Het toestaan van
verschillende meetinstrumenten legde daarbij een wissel op de vergelijkbaarheid van
gegevens. Daarnaast waren sommige indicatoren onvoldoende scherp
geoperationaliseerd. Het was onhelder hoe resultaten moesten worden berekend
(Roggeveen e.a., 2008a, 2008b). Een tweede evaluatiestudie, uitgevoerd door
PricewaterhouseCoopers & TNO Management Consultants (eveneens in opdracht van de
stuurgroep), bracht daarbij een aantal risico’s aan het licht voor het betrouwbaar meten en
vergelijken van kwaliteitsinformatie uit instellingen (PricewaterhouseCoopers & TNO
Management Consultants, 2008). De Basisset werd wederom herzien. Definities en
operationalisaties van indicatoren werden aangepast, onderbouwingen werden
aangescherpt, indicatoren kwamen te vervallen en de CQ-index werd het preferente
meetinstrument voor de meeste indicatoren. Instellingen konden tenslotte hun data laten
opschonen (Stuurgroep Zichtbare Zorg, 2009).
5.3 Het gebruik van de Basisset in het onderzoek
De veranderende definiëring en operationalisaties, het vervallen en gefaseerd invoeren
van indicatoren, verschillen in meetinstrumenten en problemen in de berekening en
aanlevering brachten vele uitdagingen met zich mee voor het onderzoek. De aangeleverde
gegevens moesten zodanig worden opgeschoond en aangevuld dat vergelijking van
instellingen over jaren heen mogelijk werd. In deze paragraaf wordt besproken welke
keuzes en bewerkingen zijn gemaakt om tot een bruikbare dataset te komen.
5.3.1 Keuze prestatie-indicatoren
Alhoewel alle indicatoren relevant waren, moest een selectie uit de indicatoren worden
gemaakt om de prestaties van instellingen over de jaren heen te kunnen vergelijken.
Enkele indicatoren overlappen met de HKZ-normen en zijn om die reden geëxcludeerd.
107