samen evalueren voor beter projectresultaat - PMWIKI.nl
samen evalueren voor beter projectresultaat - PMWIKI.nl
samen evalueren voor beter projectresultaat - PMWIKI.nl
You also want an ePaper? Increase the reach of your titles
YUMPU automatically turns print PDFs into web optimized ePapers that Google loves.
PROJECTIE<br />
SAMEN EVALUEREN VOOR<br />
BETER PROJECTRESULTAAT<br />
EVALUATIEMETHODE ‘PROJECTENKEUKEN’ VOORAL TOEKOMSTGERICHT<br />
Auteur:<br />
LEREN VAN EERDER GEMAAKTE FOUTEN EN ELDERS BEHAALDE<br />
SUCCESSEN. OOK IN PROJECTMANAGEMENT LIGGEN SUCCES- EN<br />
FAALFACTOREN AAN DE BASIS VAN VERBETERING EN<br />
OPTIMALISERING. EVALUEREN IS EEN BEPROEFDE METHODE OM DEZE<br />
FACTOREN TE TRACEREN. IN PROJECTEN GEBEURT DIT OVER HET<br />
ALGEMEEN TE WEINIG, TE LAAT OF NIET OP DE JUISTE MANIER.<br />
EVALUEREN LIJKT HET ONDERGESCHOVEN KINDJE VAN HET<br />
PROJECTMATIG WERKEN. MET MEER DUIDELIJKHEID OVER DE<br />
BEDOELING VAN EVALUATIES EN EEN GESTRUCTUREERDE EN<br />
SYSTEMATISCHE AANPAK IS EVALUEREN EEN KRACHTIG INSTRUMENT<br />
VOOR OPTIMALISERING VAN HET PROJECTRESULTAAT EN VERBETERING<br />
VAN PROJECTMANAGEMENT.<br />
Het beoordelen, of <strong>beter</strong> gezegd het op waarde schatten<br />
van activiteiten en processen tegen de achtergrond van<br />
het beoogde resultaat, gebeurt in het algemeen pas aan<br />
het eind van het project. Wanneer in een enkel geval bij<br />
overgang naar een nieuwe projectfase wordt<br />
geëvalueerd, is men vaak meer bezig met het herijken<br />
en/of bijstellen van gestelde doelen dan met het leren<br />
en corrigeren van fouten. Men kijkt liever <strong>voor</strong>uit dan<br />
achteruit. De vraag waarom doelen niet zijn gehaald en<br />
of deze alsnog (deels) te realiseren zijn, wordt in<br />
projectevaluaties te weinig gesteld. Omdat oorzaken van<br />
problemen onvoldoende aandacht krijgen, ontstaat er<br />
geen beeld van de succes- en faalfactoren van een<br />
project.<br />
Een ander facet dat bij evaluaties een rol speelt is de<br />
relatie tussen projectleider en opdrachtgever.<br />
Het aan de orde stellen van ‘fouten’ kan gevolgen<br />
hebben <strong>voor</strong> het imago en de belangen van de<br />
eindverantwoordelijke. De opdrachtgever is gebaat bij<br />
positieve rapportage. De projectleider is gebaat bij een<br />
goede relatie met zijn opdrachtgever en als<br />
eindverantwoordelijke <strong>voor</strong> het <strong>projectresultaat</strong> is hij of<br />
zij bang om fouten aan de orde te stellen, uit angst<br />
hierop te worden afgerekend. Projectevaluaties zijn<br />
daarom niet altijd een juiste of volledige afspiegeling<br />
van wat er daadwerkelijk is gebeurd.<br />
drs. Esther Borstlap (borstlap@dimensie.<strong>nl</strong>),<br />
Dimensie Advisering & Management Stedelijke ontwikkeling<br />
en ir. Yvonne Wesselink,<br />
Dienst Maatschappelijke Ontwikkeling Gemeente Utrecht’.<br />
Yvonne Wesselink (links) en Esther Borstlap ontwikkelden de evaluatiemethode<br />
‘Projectenkeuken’.<br />
LEREN EN VERBETEREN<br />
Dat <strong>evalueren</strong> een instrument is om zowel succes als<br />
falen inzichtelijk te maken, is bekend. De gebruikers<br />
van dit instrument zijn zich hier echter vaak minder<br />
bewust van de bedoeling ervan, namelijk het leren van<br />
wat goed en wat fout ging. Daarom is het belangrijk dat<br />
het achterliggende doel van evaluaties, namelijk het<br />
ver<strong>beter</strong>en van producten en processen, centraal komt<br />
te staan. In die zin wordt het signaleren van fouten door<br />
zowel de projectleider als opdrachtgever niet meer<br />
ervaren als ‘pijnpunt’, maar als een ‘ver<strong>beter</strong>punt’. Van<br />
fouten kan je leren en met de opgedane kennis kan je<br />
bijsturen en het <strong>projectresultaat</strong> ver<strong>beter</strong>en.<br />
Met een gestructureerde en systematische aanpak van<br />
evaluaties is ook in projectmanagement nog veel te<br />
winnen. Vaak is het namelijk onduidelijk hoe men een<br />
evaluatie op moet stellen, aan welke persoon binnen de<br />
organisatie deze moet worden gericht en waar binnen<br />
de organisatie de evaluaties worden verzameld. Door<br />
gebrek aan systematiek en coördinatie zijn evaluaties<br />
moeilijk te lokaliseren en slecht onderling vergelijkbaar.<br />
21
PROJECTIE<br />
S AMEN EVALUEREN VOOR BETER PROJECTRESULTAAT<br />
Hierdoor is het bijna onmogelijk om te leren van<br />
ervaringen uit het verleden, laat staan te <strong>voor</strong>komen dat<br />
eerder gemaakte fouten nog een keer worden begaan.<br />
EVALUATIEMETHODE<br />
En waarom alleen achteraf <strong>evalueren</strong> en niet <strong>voor</strong>af en<br />
tijdens een project Dit biedt namelijk mogelijkheden<br />
<strong>voor</strong> enerzijds het <strong>voor</strong>af identificeren van knelpunten<br />
en anderzijds het repareren van knelpunten tijdens het<br />
project. Het programmabureau van de Dienst<br />
Maatschappelijke Ontwikkeling van de Gemeente<br />
Utrecht (hierna DMO) heeft Dimensie Advisering &<br />
Management gevraagd het idee <strong>voor</strong> een meer<br />
gestructureerde en systematische aanpak van<br />
evaluaties verder te concretiseren. Dit is gebeurd aan de<br />
hand van de door de DMO aangedragen metafoor “de<br />
Utrechtse Projectenkeuken”. De methode stelt drie<br />
punten, namelijk de timing, de rand<strong>voor</strong>waarden en de<br />
vormgeving van het proces, centraal.<br />
TIMING<br />
Vrij algemeen denkt men dat een evaluatie pas na<br />
afronding van een project kan plaatsvinden, als<br />
beoordeling achteraf. Maar niets is minder waar. Het is<br />
mogelijk om in verschillende stadia van het project te<br />
<strong>evalueren</strong>. Met name bij langlopende projecten is het<br />
aan te raden om meerdere malen tijdens het proces te<br />
<strong>evalueren</strong>.<br />
Timing van het evaluatieproces<br />
verloopt het project tot op heden, wat kan er <strong>beter</strong> en<br />
wat gaat er goed Op basis van de antwoorden is het<br />
mogelijk het project zonodig bij te sturen om het <strong>voor</strong>af<br />
gestelde eindresultaat te halen. Deze tussentijdse<br />
evaluatie is eventueel te koppelen aan het afsluiten van<br />
projectfasen en bijbehorende fasedocumenten.<br />
Vooraf<br />
Wat er in het project kan gebeuren en hoe daarop<br />
gereageerd moet worden, kan met een evaluatie <strong>voor</strong>af<br />
vastgesteld worden. Voorspelbare, maar soms ook<br />
on<strong>voor</strong>spelbare omstandigheden komen aan de orde en<br />
reacties op die omstandigheden kunnen <strong>voor</strong>af op een<br />
adequate manier worden bedacht en <strong>voor</strong>bereid. Daarbij<br />
wordt gebruik gemaakt van eerdere evaluaties als die<br />
aanwezig zijn. Resultaat van deze evaluatie is een<br />
gedegen en doordachte <strong>voor</strong>bereiding van het project.<br />
RANDVOORWAARDEN<br />
De beste manier om het gevoel van ‘examen doen’ <strong>voor</strong><br />
de projectleider weg te nemen, is door evaluaties zo in<br />
te richten dat hij of zij er niet alleen <strong>voor</strong> staat. Een<br />
eerste <strong>voor</strong>waarde <strong>voor</strong> een goede evaluatie is dan ook<br />
dat de projectleider dit <strong>samen</strong> met andere evaluatoren<br />
doet en zij gezame<strong>nl</strong>ijk ver<strong>beter</strong>punten identificeren.<br />
Vervolgens zijn de projectleider en evaluatoren <strong>samen</strong><br />
verantwoordelijk <strong>voor</strong> de implementatie van deze<br />
punten. Hiermee is ook het vrijblijvende karakter en het<br />
‘alleen maar leveren van kritiek’ ondervangen.<br />
Achteraf<br />
Achteraf kan vastgesteld worden of de gebruikers<br />
tevreden zijn en de beheersaspecten goed volbracht<br />
zijn. Resultaat van deze evaluatie is een document<br />
waarin ver<strong>beter</strong>punten worden genoemd en<br />
aanbevelingen worden gedaan. Op die manier kan in<br />
latere projecten gebruik worden gemaakt van eerdere<br />
ervaringen.<br />
Tijdens<br />
De centrale vraag bij een tussentijdse evaluatie is: Hoe<br />
Ten tweede is het van belang dat de coördinatie van het<br />
evaluatieproces wordt ondergebracht bij één persoon.<br />
Deze zorgt <strong>voor</strong> de selectie van het te <strong>evalueren</strong> project,<br />
stelt een groepje mensen <strong>samen</strong> die aan de evaluatie<br />
deelneemt, geeft de projectleider opdracht om een evaluatiedocument<br />
<strong>samen</strong> te stellen en controleert of de<br />
gemaakte afspraken worden nagekomen. De<br />
coördinator heeft het overzicht over alle evaluaties. Het<br />
<strong>voor</strong>deel hiervan is dat evaluaties uit het verleden, bij<br />
het opstarten van nieuwe projecten, <strong>beter</strong> traceerbaar<br />
zijn. Door deze borging wordt het lerend vermogen van<br />
de organisatie vergroot.<br />
23
PROJECTIE<br />
S AMEN EVALUEREN VOOR BETER PROJECTRESULTAAT<br />
Ten derde is het van belang dat het project en het doel<br />
van de evaluatie helder wordt afgebakend. Centrale<br />
vraag hierbij is wat er wel en niet tijdens de evaluatie<br />
wordt beoordeeld om te <strong>voor</strong>komen dat de omvang van<br />
de evaluatie te groot is en oorzaken en gevolgen te veel<br />
door elkaar heen gaan lopen.<br />
VORMGEVING<br />
De ontwikkelde evaluatiemethode is zo vormgegeven<br />
dat er ook <strong>voor</strong>af en tijdens het project kan worden<br />
geëvalueerd. De evaluatiemethode is ontwikkeld vanuit<br />
de metafoor ‘de projectenkeuken’. In deze keuken, als<br />
symbool <strong>voor</strong> het programmabureau van de DMO,<br />
worden vele gerechten ofwel projecten bereid.<br />
Voor het slagen van de projectenkeuken vervullen vier<br />
personen een cruciale rol. Allereerst initieert en<br />
coördineert de uitbater de evaluaties. Hij of zij is de<br />
interne opdrachtgever van de projecten en selecteert de<br />
te <strong>evalueren</strong> projecten. Daarnaast beoordelen de kok<br />
(dit is de projectleider) en de gasten <strong>samen</strong> het gerecht.<br />
Deze gasten kunnen zowel eindgebruikers als<br />
managers zijn van de dienst waar het project onder valt.<br />
Belangrijke <strong>voor</strong>waarde <strong>voor</strong> de selectie van de gasten<br />
is wel dat zij niet zelf hebben ‘meegekookt’. En dan is er<br />
nog de gastheer; <strong>voor</strong>zitter van de beoordeling.<br />
Belangrijk bij selectie van een gastheer is dat hij of zij<br />
niet werkzaam is bij, maar wel verstand heeft van het<br />
reilen en zeilen van de <strong>evalueren</strong>de dienst. De gastheer<br />
moet onafhankelijk zijn en goed geïnformeerd over<br />
projectmatig werken.<br />
PROJECTENKEUKEN<br />
Het evaluatieproces van de Utrechtse Projectenkeuken<br />
bestaat uit vier onderdelen. Het eerste onderdeel is de<br />
selectie en afbakening van het project, aan de hand van<br />
selectiecriteria. Het tweede onderdeel is het opstellen<br />
van een document, waarin het project wordt<br />
beschreven. Tijdens de evaluatie, het derde onderdeel,<br />
zoeken de kok en de gasten onder leiding van de<br />
gastheer <strong>samen</strong> naar succes- en faalfactoren. En<br />
hiermee houdt het niet op! De evaluatoren en de<br />
gastheer helpen de projectleider bij het ver<strong>beter</strong>en van<br />
het project (zie ook rand<strong>voor</strong>waarden). Het motto is dan<br />
ook ‘<strong>samen</strong> succes- en faalfactoren benoemen en<br />
ver<strong>beter</strong>punten implementeren’. Hiermee is het vierde<br />
onderdeel aangestipt, namelijk het implementeren van<br />
ver<strong>beter</strong>punten.<br />
doorlooptijd. Vanaf het begin van de selectie van het<br />
project tot en met het gezame<strong>nl</strong>ijk identificeren van<br />
ver<strong>beter</strong>punten zit een periode van maximaal een<br />
maand. Dit komt door heldere verantwoordelijkheden<br />
en standaardisatie van het evaluatiedocument.<br />
Daarnaast zorgt de nieuwe methodiek <strong>voor</strong> commitment<br />
en een positieve houding ten opzichte van de evaluaties<br />
binnen de organisatie. Niet alleen projectleiders, maar<br />
ook hun managers zijn actief bij de evaluaties<br />
betrokken. Dit zorgt er ook nog eens <strong>voor</strong> dat men<br />
elkaar <strong>beter</strong> weet te vinden, waardoor er <strong>beter</strong> wordt<br />
<strong>samen</strong>gewerkt.<br />
Het allergrootste <strong>voor</strong>deel van de beschreven evaluatiemethodiek<br />
is de continue gelegenheid om te ver<strong>beter</strong>en<br />
en aan te sturen op het behalen van resultaten, door<br />
niet alleen achteraf, maar ook <strong>voor</strong>af en tijdens het<br />
project te <strong>evalueren</strong>. Evalueren is daarmee niet alleen<br />
terugkijken en afrekenen, maar <strong>voor</strong>al ook zeer sterk<br />
gericht op de toekomst. Door een goede borging kunnen<br />
de evaluaties hier<strong>voor</strong> ook daadwerkelijk worden<br />
gebruikt. Dat is een ver<strong>beter</strong>ing van de situatie waarin<br />
evaluaties het niveau van een afgeronde boekhouding<br />
niet overstijgen. Dat wordt bevestigd door de<br />
verantwoordelijkheid van de evaluatie en de<br />
implementatie van de ver<strong>beter</strong>punten niet alleen bij de<br />
projectleider te leggen, maar een bredere groep<br />
betrokkenen hieraan te verbinden. De nieuwe evaluatiemethodiek<br />
kan iedere organisatie laten uitgroeien tot<br />
een restaurant met drie Michelin Sterren of misschien<br />
wel meer.<br />
■<br />
De beschreven evaluatiemethodiek kent een korte<br />
Grafische weergave Utrechtse Projectenkeuken<br />
24