OnderwijsInnovatie - Jacob van Kokswijk

BOX 6: OPERATIONALISATIE EN SCORING VAN EEN BEOORDELINGSASPECT
Grenswaarden komen tot stand in
een sessie met vakinhoudelijke experts
die onafhankelijk van elkaar
voor elk beoordelingsaspect moeten
aangeven welke score minimaal behaald
moet worden om te kunnen
spreken van competentie. Het gemiddelde
van de door hen toegekende
scores is de grenswaarde van een beoordelingsaspect.
De grenswaarden
vormen de basis voor de ontwikkeling
van een standaard.Wat praktisch
en vanuit meettechnisch oogpunt de
voorkeur verdient, is op dit moment
nog niet duidelijk en zal de komende
tijd onderwerp zijn van onderzoek
door de Citogroep.We geven hieronder
een voorbeeld van hoe het zou
kunnen en wijzen er daarbij op dat de
consequenties van deze benadering
in termen van correcte beslissingen
over kandidaten, nog niet onderzocht
zijn.Volgens PPS worden prestaties
die onder assessmentcondities tot
stand zijn gekomen, beoordeeld aan
de hand van (een selectie uit) de standaardset
van beoordelingsaspecten.
De scores die dit oplevert worden opgeslagen
in het (elektronisch) beoordelingsportfolio
en vormen gaandeweg
het bewijs voor de verwerving
van de competentie.Telkens als er
een nieuw bewijsstuk is toegevoegd,
wordt er (automatisch) geëvalueerd
of op basis van de verzamelde scores
geconcludeerd kan worden dat de
competentie verworven is. Een definitieve
beslissing kan alleen genomen
worden als de verzameling bewijsstukken
voldoet aan een aantal randvoorwaarden.
Die randvoorwaarden
kunnen bijvoorbeeld het volgende
inhouden:
_ Elk beoordelingsaspect is minstens
één keer gebruikt (een maatregel
ten gunste van de representativiteit
van de scores);
_ Het beoordelingsportfolio bevat ten
minste vier bewijsstukken (een maatregel
ten gunste van de generaliseerbaarheid
van de scores);
Competentie: toezicht kunnen houden in een publiek domein.
Beoordelingsaspect: verstaat de kunst om door middel van een gesprek een conflict te beëindigen dan wel een
dreigend conflict af te wenden.
Beoordelingsschaal:
zeer slechte 1 2 3 4 5 6 zeer goede
beheersing
beheersing
Indicatoren:
_ Niveau van het taalgebruik is afgestemd op de sociaal-economische status en de gemoedstoestand van de ontvanger(s).
_ Spreekt overtuigd en zonder aarzeling.
_ Spreekt duidelijk verstaanbaar.
_ Gebruikt logische argumenten die door de ontvanger(s) goed begrepen worden.
_ De boodschap komt duidelijk over bij de ontvanger(s), resulterend in het gewenste gedrag.
_ Let op de non-verbale reacties van de ontvanger(s) en past het taalgebruik en tempo daarop aan.
_ Gebruikt zo min mogelijk jargon en licht vaktermen toe als gebruik ervan onvermijdbaar is.
_ De non-verbale communicatie is correct en effectief.
_ Verheldert onduidelijkheden met passende voorbeelden.
_ Reageert snel en passend op tegenwerpingen van de ontvanger(s).
Beoordelingsschaal indicatoren: (wordt gebruikt voor elke indicator)
dit punt schiet 1 2 3 4 dit punt is
ernstig tekort
goed ontwikkeld
Scoringsprocedure:
Totaal aantal scorepunten
1 2 3 4
aantal gebruikte indicatoren: 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0
1 2 3 4 5
2 1 2 3 3 4 5 6
3 1 2 2 3 3 4 4 5 5 6
4 1 2 2 3 3 3 4 4 4 5 5 5 6
5 1 1 2 2 2 3 3 3 4 4 4 5 5 5 6 6
6 1 1 1 2 2 2 3 3 3 4 4 4 4 5 5 5 6 6 6
7 1 1 1 2 2 2 2 3 3 3 3 4 4 4 4 5 5 5 5 6 6 6
8 1 1 1 1 2 2 2 2 3 3 3 3 4 4 4 4 4 5 5 5 5 6 6 6 6
9 1 1 1 1 2 2 2 2 2 3 3 3 3 3 4 4 4 4 4 5 5 5 5 5 6 6 6 6
10 1 1 1 1 1 2 2 2 2 2 3 3 3 3 3 4 4 4 4 4 4 5 5 5 5 5 6 6 6 6 6
Toelichting scoreprocedure:
Om vanuit de scores op de indicatoren te komen tot een score op de beoordelingsschaal van het bovenliggende
beoordelingsaspect wordt bovenstaande tabel gebruikt. Handel als volgt:
1. Bepaal op de verticale as het aantal gebruikte indicatoren.
2. Bepaal op de horizontale as de totaalscore op de gebruikte indicatoren.
3. Op het snijpunt van de in stap 1 en 2 gevonden coördinaten staat de score op de beoordelingsschaal van het
‘bovenliggende’ beoordelingsaspect.
OnderwijsInnovatie juni 2004 25