28.12.2013 Views

Protocol digitaal werkboek - Universiteit van Amsterdam

Protocol digitaal werkboek - Universiteit van Amsterdam

Protocol digitaal werkboek - Universiteit van Amsterdam

SHOW MORE
SHOW LESS

You also want an ePaper? Increase the reach of your titles

YUMPU automatically turns print PDFs into web optimized ePapers that Google loves.

<strong>Protocol</strong> <strong>digitaal</strong> <strong>werkboek</strong><br />

<strong>Universiteit</strong> <strong>van</strong> <strong>Amsterdam</strong><br />

Afdeling Psychologie


Inhoudsopgave<br />

Voorwoord _________________________________________________________ 3<br />

Het <strong>digitaal</strong> <strong>werkboek</strong> ___________________________________________________ 3<br />

1. Het opzetten <strong>van</strong> een <strong>digitaal</strong> <strong>werkboek</strong> ______________________________ 4<br />

1.1 De structuur <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> ________________________________ 4<br />

1.2 Implementatie in het huidige onderwijs ________________________________ 5<br />

1.3 De interactieve oefeningen____________________________________________ 5<br />

1.3.1 Oefeningen plaatsen in Blackboard _________________________________________ 6<br />

1.3.2 Zelf oefeningen maken ___________________________________________________ 6<br />

1.3.3. Overige tips bij het maken <strong>van</strong> oefeningen __________________________________ 7<br />

1.4 De Digitale Toetsen __________________________________________________ 8<br />

1.4.1 Het gebruik <strong>van</strong> vragenpools ______________________________________________ 8<br />

1.4.3 Het maken <strong>van</strong> een toets _________________________________________________ 10<br />

1.4.4 Het gradecentre ________________________________________________________ 14<br />

1.4.4.1 Kolommen organiseren ________________________________________________ 15<br />

1.4.4.2 Grading Schemas______________________________________________________ 17<br />

2. Het onderhouden <strong>van</strong> een <strong>digitaal</strong> <strong>werkboek</strong> _________________________ 19<br />

2.1 Fouten herstellen in de toets _________________________________________ 19<br />

2.2 Het gradecenter _____________________________________________________ 20<br />

2.2.1 Icoon: ______________________________________________________________ 20<br />

2.2.2 Icoon: ______________________________________________________________ 21<br />

2.3 Herkansing instellen ________________________________________________ 21<br />

2.3.1 Een herkansing geven voordat de deadline sluit. ____________________________ 22<br />

2.3.2 Adaptive Release instellen _______________________________________________ 23<br />

2.3.3 Adaptive Release checken ________________________________________________ 23<br />

2.3.4 Adaptive release voor grote groepen ______________________________________ 24<br />

2.4 Problemen met Maple T.A. __________________________________________ 26<br />

2.4.1 Een herkansing instellen _________________________________________________ 26<br />

2.4.2 Cijfers corrigeren _______________________________________________________ 28<br />

3. Contactinformatie ________________________________________________ 29<br />

Appendix _____________________________________________________________ 30<br />

Checklist <strong>digitaal</strong> <strong>werkboek</strong> __________________________________________________ 30<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—2/30


Het <strong>digitaal</strong> <strong>werkboek</strong><br />

Voorwoord<br />

In het kader <strong>van</strong> studiesucces is de UvA in 2010 begonnen met het<br />

ontwikkelen <strong>van</strong> een <strong>digitaal</strong> <strong>werkboek</strong> voor eerstejaars<br />

psychologiestudenten. Het doel was om <strong>van</strong>uit ICT een ondersteunende<br />

structuur te bieden, waarbinnen studenten gestimuleerd worden om continu<br />

met de stof bezig te zijn, waardoor er beter wordt gestudeerd, uitstelgedrag<br />

wordt voorkomen en studenten <strong>van</strong>af dag één aan het studeren zijn.<br />

Met dit doel voor ogen hebben we wekelijkse opdrachten aangeboden op<br />

Blackboard bestaande uit een interactieve oefening over de collegestof en een<br />

toets. We zijn begonnen met de eerste vakken <strong>van</strong> het studiejaar 2010-2011,<br />

Inleiding & Cognitie en Onderzoeksmethoden & Statistiek. Op basis <strong>van</strong> onze<br />

ervaringen, studentevaluaties, een panelgesprek en docentevaluaties hebben<br />

we het <strong>digitaal</strong> <strong>werkboek</strong> verder ontwikkeld en uitgebreid naar alle<br />

propedeusevakken.<br />

Inmiddels zijn we een jaar verder, zijn de kinderziektes aangepakt en hebben<br />

we een goed lopende digitale onderwijsvorm voor het propedeusejaar<br />

psychologie. Door de positieve resultaten en de groeiende interesse voor<br />

<strong>digitaal</strong> toetsen en e-learning in het hoger onderwijs delen wij graag onze<br />

kennis en ervaring <strong>van</strong> het afgelopen jaar.<br />

Dit protocol geeft een overzicht <strong>van</strong> praktische tips voor het opzetten en<br />

draaiende houden <strong>van</strong> een <strong>digitaal</strong> <strong>werkboek</strong>. Om onze ervaringen tot nu toe<br />

zo bruikbaar mogelijk te maken hebben we voor zowel de interactieve<br />

oefeningen als de toetsen aangegeven hoe wij deze hebben vormgegeven,<br />

welke Blackboard-instellingen we gebruikt hebben (incl. screenshots) en<br />

welke problemen je tegen kunt komen en hoe deze op te lossen. Vervolgens<br />

geven we een aantal praktische tips over wie en wat nodig is om een <strong>digitaal</strong><br />

<strong>werkboek</strong> draaiende te houden gedurende een cursus.<br />

Het <strong>digitaal</strong> <strong>werkboek</strong> werd mogelijk gemaakt door Maartje Prevosth<br />

(conceptontwikkeling, coördinatie, implementatie en ontwikkeling), Peter<br />

Starreveld (conceptontwikkeling en inhoudelijke invulling), Caspar<br />

Groeneveld en Paul Lodder (technische ondersteuning), Klaas Visser<br />

(financiële ondersteuning), ICTO UvA (financiële ondersteuning) en de<br />

docenten (inhoudelijke invulling).<br />

M. Prevosth MSc<br />

Coördinator Digitaal Werkboek<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—3/30


1. Het opzetten <strong>van</strong> een <strong>digitaal</strong> <strong>werkboek</strong><br />

1.1 De structuur <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong><br />

Bij het ontwerpen <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> op een blackboard pagina <strong>van</strong><br />

een cursus is het handig om de opdrachten volgens een bepaald format te<br />

ontwerpen, zodat de student kan wennen aan een bepaalde manier <strong>van</strong><br />

opdracht afname. Het is aan te raden om dit format consistent te houden<br />

gedurende het jaar.<br />

De structuur <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> op de UvA ziet er als volgt uit. Binnen<br />

de blackboardpagina <strong>van</strong> een cursus is een map aangemaakt waar de <strong>digitaal</strong><br />

<strong>werkboek</strong> opdrachten in verschijnen op het moment dat ze door studenten<br />

gemaakt kunnen worden (zie Figuur 1.1). Daar staat ook een handleiding met<br />

FAQs en contactgegevens voor het geval <strong>van</strong> technische problemen. Elke<br />

week verschijnt er een opdracht die bestaat uit een digitale interactieve<br />

oefening die gedurende de hele week gemaakt kan worden. De oefening gaat<br />

over de collegestof <strong>van</strong> die week. Hoe deze oefeningen er precies uit zien staat<br />

onder paragraaf 1.3 beschreven. Naast de oefening is er een cumulatieve (de<br />

stof tot dan toe) multiple choice (MC)-toets om de week af te sluiten. De<br />

deadline is altijd op dezelfde dag. Hoe de toetsen precies zijn opgebouwd<br />

staat onder paragraaf 1.4 beschreven.<br />

Figuur 1.1: Beginscherm <strong>van</strong> de map ‘Digitaal Werkboek’<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—4/30


Om studenten te stimuleren om de oefeningen en toetsen serieus te maken is<br />

gekozen voor het meenemen <strong>van</strong> de resultaten in het eindcijfer <strong>van</strong> een vak.<br />

De interactieve oefeningen zijn daarbij niet verplicht maar in de toets zijn<br />

telkens twee vragen opgenomen over de oefening. De toetsen zelf zijn ook<br />

niet verplicht om een vak te halen, maar het gemiddelde telt voor zo’n 10%<br />

<strong>van</strong> het eindcijfer mee. Dit lijkt genoeg te zijn om studenten daadwerkelijk<br />

aan de slag te krijgen. In de evaluaties <strong>van</strong> het vak Inleiding & Cognitie geeft<br />

80% <strong>van</strong> de studenten aan alle (niet verplichte) oefeningen gemaakt te hebben,<br />

naast de toetsen die alle studenten gemaakt hebben.<br />

1.2 Implementatie in het huidige onderwijs<br />

Bij het implementeren <strong>van</strong> een nieuwe werkvorm zoals het <strong>digitaal</strong> <strong>werkboek</strong><br />

is een heldere communicatie naar studenten en docenten zeer belangrijk.<br />

Hieronder volgen een aantal voorwaarden:<br />

o<br />

o<br />

o<br />

o<br />

o<br />

o<br />

Zorg ervoor dat docenten, begeleiders <strong>van</strong> werkgroepen en<br />

studieadviseurs goed op de hoogte zijn <strong>van</strong> de structuur en<br />

inhoud <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong>.<br />

Laat docenten in de colleges verwijzen naar de digitale oefeningen<br />

zodat studenten serieus aan de slag gaan.<br />

Stem de inhoud <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> goed af met de colleges<br />

en werkgroepen.<br />

Zorg voor één aanspreekpunt voor studenten wat betreft het<br />

<strong>digitaal</strong> <strong>werkboek</strong> (bijv. een apart email-adres). Onze ervaring is<br />

dat studenten naar allerlei partijen mailen met vragen (naar<br />

docenten, begeleiders, studieadviseurs, de onderwijsbalie)<br />

ondanks dat op blackboard duidelijk staat aangegeven hoe ze<br />

contact op kunnen nemen. Om een hoop verwarring,<br />

doorstuurmail en inconsistente antwoorden te vermijden is het het<br />

meest praktisch om alle partijen naar blackboard te laten verwijzen,<br />

waar studenten zelf in de handleiding de juiste contactgegevens<br />

kunnen vinden.<br />

Zorg voor een overzichtelijke blackboardpagina, met duidelijke<br />

instructies, FAQs, rooster etc.<br />

Integreer de deadlines <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> in het college en<br />

werkgroeprooster, zodat studenten een goed overzicht hebben <strong>van</strong><br />

alle werkvormen en deadlines.<br />

1.3 De interactieve oefeningen<br />

De interactieve oefeningen in het <strong>digitaal</strong> <strong>werkboek</strong> dienen ter verlevendiging<br />

en verdieping <strong>van</strong> onderwerpen die in het college aan bod zijn gekomen. In<br />

overleg met de docent zijn de onderwerpen <strong>van</strong> de oefeningen bepaald. Het<br />

kan gaan om lastige onderwerpen waar extra aandacht en oefening gewenst is,<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—5/30


om onderwerpen die wel belangrijk zijn maar waar weinig tijd voor was in<br />

het college of onderwerpen die zich beter lenen voor simulaties en<br />

beeldmateriaal dan voor gesproken collegevorm.<br />

1.3.1 Oefeningen plaatsen in Blackboard<br />

Digitale oefeningen zijn op verschillende manieren te creëren binnen Bb. In<br />

eerste instantie is zoveel mogelijk gebruik gemaakt <strong>van</strong> bestaande oefeningen<br />

<strong>van</strong> uitgevers en universiteiten. Tegenwoordig hebben veel studieboeken een<br />

bijbehorende website waar bruikbare simulaties en oefeningen te vinden zijn.<br />

Voorbeelden <strong>van</strong> oefeningen voor het vak Inleiding in de Psychologie zijn<br />

PsychSim en ZAP (zeer actieve psychologie).<br />

In Bb kan eenvoudig een link gemaakt worden naar dit soort oefeningen via<br />

build-content - URL. Tip: gebruik de instelling open in new window (zie Figuur<br />

1.2). Een onhandigheid <strong>van</strong> Bb is namelijk dat externe links die in Bb geopend<br />

worden, niet meer kunnen afsluiten.<br />

Figuur 1.2 Open in new window<br />

1.3.2 Zelf oefeningen maken<br />

In het geval dat er geen geschikte oefeningen online voorhanden zijn kunnen<br />

deze in Bb gemaakt worden. De oefeningen die wij gemaakt hebben bestaan<br />

vaak uit een combinatie <strong>van</strong> beeld- of videomateriaal, een onderzoeksartikel<br />

en open vragen (via een survey of test) waar geautomatiseerd feedback op<br />

gegeven wordt.<br />

In het geval dat een oefening uit een aantal onderdelen bestaat kun je kiezen<br />

voor een learning module (via Build Content), waarin alle onderdelen achter<br />

elkaar doorlopen moeten worden in een overzichtelijk format (zie Figuur 1.3) .<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—6/30


Figuur 1.3 Voorbeeld <strong>van</strong> een ‘ learning modue’<br />

1.3.3. Overige tips bij het maken <strong>van</strong> oefeningen<br />

o Test de oefening in Bb via een studentaccount voordat<br />

studenten ermee aan de slag gaan.<br />

o Test de oefening in verschillende browsers. Soms werken<br />

sommige onderdelen of links niet goed in bepaalde browsers.<br />

o Vermeld de URL bij youtubefilmpjes die binnen Bb embedded<br />

zijn, zodat studenten evt. zelf het filmpje kunnen openen als het<br />

niet werkt.<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—7/30


1.4 De Digitale Toetsen<br />

Zoals eerder aangegeven bestaat elke opdracht in het <strong>digitaal</strong> <strong>werkboek</strong> uit<br />

een oefening en een toets. De toetsen op de UvA hebben een cumulatief<br />

karakter, wat inhoudt dat alle stof tot dan toe getoetst wordt. Door deze<br />

toetsen blijven de studenten niet alleen up-to-date, maar herhalen ze ook<br />

telkens de eerder geleerde stof tot aan het tentamen.<br />

Er zijn een aantal redenen om de toetsen cumulatief te maken. De eerste is dat<br />

de toetsen zo een beter beeld geeft <strong>van</strong> wat er geleerd moet worden voor de<br />

toets. Wanneer een toets alleen de stof <strong>van</strong> die week behandelt, lijkt de stof<br />

makkelijker en kan de student ten onrechte een gevoel <strong>van</strong> beheersing <strong>van</strong> de<br />

stof krijgen. Daarnaast is het herhaaldelijk ophalen <strong>van</strong> stof binnen een<br />

toetsomgeving in zichzelf een middel waar je goed <strong>van</strong> leert.<br />

De toetsen worden individueel gemaakt, elke student krijgt een set vragen die<br />

random uit vragenpools worden getrokken. Na elke toets ont<strong>van</strong>gt de student<br />

direct een cijfer en feedback waarin staat aangegeven of een vraag goed<br />

beantwoord is of niet en waar het juiste antwoord te vinden is. Deze feedback<br />

is een verwijzing naar het hoofdstuk in het boek. Een student ziet dus geen<br />

antwoordopties en ook niet het juiste antwoord. De resultaten komen<br />

vervolgens in het gradecenter terecht, dat elke student op elk gewenst<br />

moment kan openen.<br />

In de evaluaties geeft zo’n 90% <strong>van</strong> de studenten aan de toetsen nuttig te<br />

vinden gedurende het hele jaar. Aan het eind <strong>van</strong> het jaar geeft 68% <strong>van</strong> de<br />

studenten aan dat de oefeningen en toetsen hebben bijgedragen aan het<br />

bijhouden <strong>van</strong> de stof. Daarnaast zijn de correlaties berekend tussen de<br />

tentamens en de cijfers in het <strong>digitaal</strong> <strong>werkboek</strong>. Voor elk vak lag de correlatie<br />

rond de 0.6 (p < .01). Deze positieve resultaten hebben ons ertoe gezet om het<br />

<strong>digitaal</strong> <strong>werkboek</strong> voort te zetten in het huidige studiejaar. Hieronder wordt<br />

specifiek beschreven hoe je toetsen, zoals gebruikt in het <strong>digitaal</strong> <strong>werkboek</strong>,<br />

kunt aanmaken.<br />

1.4.1 Het gebruik <strong>van</strong> vragenpools<br />

Blackboard biedt verschillende mogelijkheden bij het maken <strong>van</strong> toetsen. De<br />

meest gebruikte vorm is de ‘multiple choice’, maar het is bijvoorbeeld ook<br />

mogelijk om ‘true/false’, ‘open question’, of ‘likert-scale’ te gebruiken. Alle<br />

soorten vragen kunnen handmatig worden ingevoerd, maar blackboard biedt<br />

ook de mogelijkheid om bestanden te uploaden met daarin een reeks vragen<br />

(ook wel een ‘vragenpool’ genoemd). Een voordeel <strong>van</strong> deze methode is dat<br />

het bij een grote hoeveelheid vragen sneller werkt dan wanneer alle vragen<br />

handmatig in blackboard worden ingevoerd.<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—8/30


Het programma Respondus kan de bronbestanden leveren die compatibel zijn<br />

met blackboard. Het voordeel <strong>van</strong> Respondus is dat dit programma de<br />

bestanden ook kan omzetten naar formats die in andere toetsprogramma’s<br />

kunnen worden gelezen, zoals Question Mark Perception.<br />

De input in Respondus is een bronbestand gemaakt in Microsoft Word, met<br />

daarin alle vragen die gebruikt moeten worden voor de vragenpool. Na<br />

enkele handelingen in Respondus is de output die het programma levert een<br />

Zip-bestand, dat direct in blackboard kan worden geupload. Er wordt<br />

geadviseerd om een aparte vragenpool in Word te maken voor iedere toets<br />

die uiteindelijk op blackboard moet worden ingevoerd. Het is belangrijk om<br />

iedere vraag in dezelfde opmaak te typen.<br />

Een voorbeeld <strong>van</strong> een vraag is:<br />

1) De snelheid <strong>van</strong> het actiepotentiaal is afhankelijk <strong>van</strong><br />

~ Meer uitleg kun je vinden in Hoofdstuk 2<br />

@ Meer uitleg kun je vinden in Hoofdstuk 2<br />

a) de hoeveelheid natrium buiten de cel.<br />

*b) de dikte <strong>van</strong> het axon.<br />

c) het aantal dendrieten dat een neuron heeft.<br />

Een vraag wordt altijd geopend met een nummer gevolgd door een<br />

haakjesluiten. Na een spatie volgt de vraag, die – afhankelijk <strong>van</strong> de manier<br />

waarop de vraag gesteld wordt – afgesloten wordt met de nodige interpunctie.<br />

Op de volgende regel volgt na een tab het teken: ~ dat symbool staat voor<br />

‘indien de vraag goed is beantwoord’. De informatie achter het symbool<br />

wordt aan studenten getoond die de vraag goed hebben beantwoord. De regel<br />

eronder houdt precies hetzelfde in, alleen nu staat het teken: @ symbool voor<br />

‘indien de vraag fout is beantwoord’. Op de daarop volgende regels<br />

verschijnen de antwoordmogelijkheden, waarbij een * wordt geplaatst voor<br />

het juiste antwoord. De volgende vraag kan op precies dezelfde manier<br />

worden gemaakt, en vragen worden gescheiden door een witregel.<br />

Nadat het bronbestand af is gemaakt kan Respondus worden opgestart.<br />

Raadpleeg uw systeembeheerder indien dit programma niet op uw werkplek<br />

is geïnstalleerd, of kijk voor meer informatie op www.respondus.com.<br />

In Respondus kan het Word-bestand worden omgezet naar een Zip-bestand.<br />

Allereerst moet gekozen worden voor ‘import file’. Vervolgens dient aan te<br />

worden gegeven dat het bronbestand een Microsoft Word bestand is (.doc).<br />

Daarna kan het bronbestand geselecteerd worden door het op te zoeken op de<br />

opgeslagen locatie. Vervolgens kan worden geklikt op ‘create new document’<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—9/30


en kan het document een naam worden gegeven. Om te testen of Respondus<br />

problemen opmerkt in het bestand wordt eerst op de knop ‘preview’ gedrukt.<br />

Indien er problemen zijn opgemerkt in het bronbestand verschijnen deze in<br />

beeld. Het gebeurt regelmatig dat er problemen worden opgemerkt die<br />

eigenlijk geen probleem zijn. Voor iedere vraag gebruikt Respondus de eerste<br />

paar woorden als korte vraagbeschrijving. Soms komt het voor dat de eerste<br />

woorden <strong>van</strong> verschillende vragen overeenkomen. Dit geeft Respondus als<br />

een error aan, maar kan dus worden genegeerd. Wel is het handig om even na<br />

te gaan of er niet echt twee dezelfde vragen in het bronbestand zaten, want<br />

dan zou dit wel een terecht probleem zijn. Een ander probleem dat<br />

Respondus opmerkt, maar vaak onterecht is, is het niet kunnen vinden <strong>van</strong><br />

‘choice alternatives’ voor een bepaalde vraag. Maar toch is het handig om<br />

even na te gaan of de betreffende vraag wel antwoordmogelijkheden heeft.<br />

Over het algemeen is het dus handig om bij een error even na te gaan of er<br />

daadwerkelijk sprake is <strong>van</strong> deze error, en als alles correct lijkt, dan kan de<br />

error genegeerd worden. Na het controleren <strong>van</strong> de errors kan ‘finish’ worden<br />

aangeklikt. Nu verschijnt een overzicht <strong>van</strong> alle vragen uit de pool. Als alles<br />

klopt dan kunnen deze vragen naar een zip bestand worden geëxporteerd.<br />

Klik boven in de menubalk op ‘preview and publish’. Vervolgens klik je op<br />

‘save pool to local file for manual uploading’. Daarna kan de plaats worden<br />

gekozen waar het bestand moet worden opgeslagen en ten slotte kan op<br />

‘finish’ worden geklikt.<br />

Nadat Respondus het Zip-bestand heeft gemaakt met daarin de vragenpools,<br />

kan dit bestand worden geupload op de blackboard pagina <strong>van</strong> de cursus<br />

waar de test voor moet worden gemaakt. Linksonder op de blackboard<br />

pagina staat de menubalk ‘course management’. Hierin staat onder het kopje<br />

‘Course Tools’ het subkopje ‘Tests, Surveys, and Pools’. Nadat op dit subkopje<br />

is geklikt verschijnt er een scherm in beeld waarin kan worden gekozen<br />

tussen tests, surveys, of pools. Om vragenpools te importeren dient op ‘pools’<br />

te worden geklikt en vervolgens op ‘import pools’.<br />

Via ‘browse computer’ kan het Zip-bestand worden geselecteerd op de plaats<br />

waar het is opgeslagen.<br />

1.4.3 Het maken <strong>van</strong> een toets<br />

Toetsen kunnen op twee manieren worden aangemaakt. De eerste manier is<br />

in het zelfde menu als waar de pools zijn aangemaakt (Course Management -><br />

Course Tools -> Tests, Surveys, and Pools). Dit is handig als toetsen gemaakt<br />

moeten worden die niet direct op de blackboard pagina moeten worden<br />

weergegeven. De toetsen komen terecht in een database waar <strong>van</strong>uit ze<br />

geselecteerd kunnen worden als een toets aan een content-area <strong>van</strong> een<br />

blackboard pagina moet worden toegevoegd. De tweede manier om een toets<br />

te maken is in de content-area <strong>van</strong> een blackboard pagina, zodat de toets direct<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—10/30


in deze area zichtbaar wordt. In de content-area kan worden gekozen voor<br />

‘create assessment’ en vervolgens voor ‘test’. Daarna verschijnt er een scherm<br />

waarin kan worden gekozen voor een bestaande toets uit de database (add test)<br />

of het zelf maken <strong>van</strong> een nieuwe test (create a new test). Als wordt gekozen<br />

voor het zelf maken <strong>van</strong> een toets, dan moet eerst een aantal gegevens over de<br />

test en instructies worden ingevoerd, voordat de vragen gemaakt kunnen<br />

worden. Er zijn meerdere manieren om vragen toe te voegen aan een toets. In<br />

het test menu verschijnen drie kopjes:<br />

Create Question: vragen worden één voor één gemaakt in blackboard.<br />

Bij deze mogelijkheid kan een groot aantal verschillend soorten vragen<br />

worden gebruikt.<br />

Reuse Question: een set vragen kan in één keer worden toegevoegd aan<br />

de toets. Door bijvoorbeeld voor ‘create random block’ te kiezen, kan<br />

een reeds gemaakte vragenpool worden geselecteerd waaruit<br />

willekeurig een bepaald aantal vragen aan de toets worden gekoppeld.<br />

Upload Questions: een bestand met vragen kan in één keer op<br />

blackboard worden geupload en aan de toets worden toegevoegd.<br />

Als alle vragen aan de test zijn toegevoegd kan het aantal punten voor iedere<br />

correct beantwoorde vragen worden ingesteld. Daarna kan op ‘ok’ worden<br />

geklikt en is de test klaar voor gebruik. Het is erg handig om de toets voor<br />

gebruik te testen, zodat eventuele fouten vroegtijdig opgelost kunnen worden.<br />

De bijlage bevat een checklist die hiervoor gebruikt kan worden.<br />

In het menu ‘test options’ kan een aantal opties worden ingesteld die<br />

belangrijk kunnen zijn bij het afnemen <strong>van</strong> bepaalde tests. Zoals in Figuur 1.4<br />

kan worden gezien is het handig om in te stellen dat de link <strong>van</strong> de toets<br />

‘available’ is. Vervolgens kan worden aangegeven tussen welke tijdsmomenten<br />

de toets zichtbaar wordt voor studenten. Verder kan een timer worden<br />

ingesteld.<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—11/30


Figuur 1.4 Test options<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—12/30


Zoals verder in bovenstaande figuur te zien is kan voor de optie ‘forced<br />

completion’ worden gekozen. Deze optie dwingt de student om de toets in één<br />

keer af te ronden. Er wordt geadviseerd deze optie niet aan te vinken. Als een<br />

student tijdens het maken <strong>van</strong> een toets het toetsscherm per ongeluk verlaat,<br />

kan de student niet meer terug als ‘forced completion’ staat aangevinkt. Omdat<br />

er vele manieren zijn om het toetsscherm te verlaten (bijvoorbeeld een klik op<br />

de zijkant <strong>van</strong> de muis, F5, een kopje in de menubalk <strong>van</strong> Bb, een ander<br />

tabblad of Escape) gebeurt dit dan ook veel. Het gevolg is dat de gemaakte<br />

vragen niet meer gesubmit kunnen worden door de student en er geen<br />

resultaat verschijnt in het gradecenter, maar een icoon met schriftje en pen.<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—13/30


Dit kan vervolgens alleen handmatig door een medewerker hersteld worden,<br />

wat veel onnodig werk oplevert. Oplossing: zet ‘forced completion’ uit en de<br />

timer aan. De student kan zo in en uit de toets, maar de tijd loopt gewoon<br />

door en de vragen die al gemaakt zijn blijven behouden.<br />

In Figuur 1.4 staan bij punt 4 feedbackopties die kunnen worden<br />

weergegeven na het maken <strong>van</strong> de test. De reden dat het correcte antwoord<br />

niet staat aangevinkt is dat studenten op die manier worden gestimuleerd de<br />

literatuur te raadplegen nadat ze een fout antwoord hebben gegeven, zodat ze<br />

zelf het juiste antwoord kunnen opzoeken en daar meer <strong>van</strong> leren dan dat het<br />

correcte antwoord zo wordt gepresenteerd bij de feedback.<br />

In Figuur 1.4 deel 5 wordt de mogelijkheid geboden om alle vragen <strong>van</strong> de<br />

toets tegelijkertijd aan te bieden, of één voor één. Verder kan ook de optie<br />

worden ingesteld dat bij sequentiële weergave <strong>van</strong> de vragen de student niet<br />

de mogelijkheid krijgt om een eerder beantwoorde vraag aan te passen. Deze<br />

optie wordt geadviseerd als vragen worden gebruikt die het antwoord <strong>van</strong><br />

eerder gestelde vragen zouden kunnen verraden. Ten slotte is het mogelijk<br />

om in te stellen dat de vragen willekeurig worden gepresenteerd of bij iedere<br />

toets volgens dezelfde volgorde.<br />

De in dit hoofdstuk beschreven procedure is een <strong>van</strong> de manieren waarop een<br />

toets kan worden gemaakt en zeker niet de enige juiste manier. Naar onze<br />

ervaring is dit een snelle en overzichtelijke manier waarop toetsen kunnen<br />

worden geconstrueerd, maar het is goed mogelijk dat er situaties zijn waarin<br />

andere manieren <strong>van</strong> testconstructie voordeliger zijn. Voor een overzicht <strong>van</strong><br />

de mogelijkheden <strong>van</strong> blackboard met betrekking tot het maken <strong>van</strong> toetsen<br />

verwijzen we naar de blackboard Instructors manual.<br />

1.4.4 Het gradecentre<br />

In het gradecentre wordt <strong>van</strong> alle studenten in de cursus de behaalde<br />

resultaten weergegeven. Het kan hier gaan om resultaten <strong>van</strong> het correct<br />

inleveren <strong>van</strong> opdrachten, tot een cijfer dat is verkregen voor het maken <strong>van</strong><br />

een meerkeuzetoets.<br />

Het is noodzakelijk om een kopje in de menubalk toe te voegen waarin<br />

studenten de resultaten <strong>van</strong> hun <strong>digitaal</strong> <strong>werkboek</strong> kunnen inzien. Dit kan<br />

door linksboven in de menubalk op het + symbool te klikken en vervolgens<br />

op ‘create tool link’. Uit de lijst selecteert u ‘my grades’. Als docent of<br />

medewerker kunt u deze pagina niet bekijken, omdat de inhoud <strong>van</strong> deze<br />

pagina afhangt <strong>van</strong> de resultaten <strong>van</strong> een bepaalde student. Wel hebben<br />

medewerkers inzicht in de resultaten <strong>van</strong> alle studenten in het gradecentre. Dit<br />

is te vinden linksonder door bij ‘course management’ te klikken op ‘grade centre’<br />

en vervolgens ‘full grade centre’.<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—14/30


1.4.4.1 Kolommen organiseren<br />

In het gradecentre zijn de resultaten <strong>van</strong> alle studenten zichtbaar. Voor elke<br />

toets die in Bb is aangemaakt verschijnt automatisch een kolom. Daarnaast<br />

hebben wij een average colomn toegevoegd waarin het gemiddelde <strong>van</strong> de<br />

gemaakte toetsen wordt weergegeven. De resultaten <strong>van</strong> de toetsen worden<br />

verder in cijfers (met een gokkanscorrectie) weergegeven. Dit cijfer is<br />

aangemaakt met een grading schema. Hieronder worden aan aantal opties<br />

verder uitgelegd.<br />

In het gradecentre kunnen kolommen worden toegevoegd met informatie<br />

over de student. Ook kan een kolom worden gemaakt waarbij de informatie<br />

wordt verkregen door middel <strong>van</strong> een formule. Denk hierbij aan het<br />

berekenen <strong>van</strong> de gemiddelde scores <strong>van</strong> studenten op de toetsen <strong>van</strong> het<br />

digitale <strong>werkboek</strong>. De soort kolommen die aan het gradecentre worden<br />

toegevoegd zijn afhankelijk <strong>van</strong> de manier waarop het <strong>digitaal</strong> <strong>werkboek</strong> voor<br />

een betreffende cursus is opgemaakt.<br />

Een voorbeeld opmaak zou kunnen zijn: Het <strong>digitaal</strong> <strong>werkboek</strong> <strong>van</strong> vak X<br />

bevat 10 meerkeuzetoetsen en 3 extra opdrachten. De gemiddelde score <strong>van</strong><br />

de meerkeuzetoetsen tellen voor 10% mee voor het eindcijfer <strong>van</strong> vak X. De<br />

kolommen waarin de scores <strong>van</strong> iedere meerkeuzetoets staan weergegeven,<br />

verschijnen automatisch in het <strong>digitaal</strong> <strong>werkboek</strong> bij het aanmaken <strong>van</strong> de<br />

betreffende toets. Per kolom kan vervolgens worden ingesteld of de score in<br />

punten of in percentages moet worden weergegeven. Daarnaast kan worden<br />

ingesteld of de kolom zichtbaar moet worden voor studenten. Kolommen<br />

waarin staat aangegeven of een extra opdracht via blackboard is ingeleverd,<br />

worden ook automatisch weergegeven bij het aanmaken <strong>van</strong> een inleverpunt<br />

in blackboard (bijvoorbeeld Ephorus assignment).<br />

Om de studenten beter inzicht te verschaffen in hun voorlopige resultaat op<br />

het <strong>digitaal</strong> <strong>werkboek</strong>, kan een nieuwe kolom worden aangemaakt waarin de<br />

gemiddelde score staat weergegeven <strong>van</strong> de meerkeuzetoetsen die de student<br />

heeft moeten maken. Er zijn twee opties om een nieuwe kolom aan te maken:<br />

“create column”, en “create calculated column”. In dit geval is het wenselijk dat<br />

blackboard berekeningen uitvoert over andere kolommen (het gemiddelde<br />

berekenen <strong>van</strong> de toetsen), waardoor gekozen moet worden voor “create<br />

calculated column”. Er zijn verschillende soorten calculated columns die door<br />

blackboard kunnen worden aangemaakt (zie Figuur 1.5).<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—15/30


Figuur 1.5 Create calculated column<br />

De Average Column wordt berekend op basis <strong>van</strong> de gemiddelde waarde <strong>van</strong><br />

een aantal geselecteerde andere kolommen. De Weighted Average Column<br />

wordt berekend op basis <strong>van</strong> een gewogen gemiddelde <strong>van</strong> een aantal<br />

geselecteerde andere kolommen. De weging <strong>van</strong> iedere kolom kan handmatig<br />

worden ingesteld. De Total Column wordt berekend door de waarde <strong>van</strong> de<br />

geselecteerde kolommen bij elkaar op te tellen. Ten slotte wordt in de<br />

Minimum/Maximum Column weergegeven wat de minimale of maximale<br />

waarde is die gevonden kan worden in de geselecteerde kolommen. Om voor<br />

studenten de gemiddelde score op de 10 meerkeuzetoetsen te laten berekenen<br />

kan het best gekozen worden voor create average column.<br />

Vervolgens verschijnt een scherm waarin informatie over de aan te maken<br />

kolom kan worden ingevuld. In deel 1 kan kolominformatie worden<br />

ingevoerd zoals hoe de kolom zal heten in het gradecentre. Daarnaast kan<br />

worden aangegeven op welke manier het resultaat wordt weergegeven in het<br />

gradecentre. Dit kan worden ingesteld bij primary display. Standaard is er de<br />

mogelijkheid om de resultaten als score of percentage weer te geven. Het is<br />

echter ook mogelijk om zelf een manier te creëren waarop het resultaat wordt<br />

weergegeven. Dit kan door een grading schema te maken (zie § 1.4.4.2). Bij deel<br />

3 <strong>van</strong> het invoeren <strong>van</strong> de kolominformatie (zie Figuur 1.6) kan worden<br />

aangegeven of het gemiddelde gebaseerd moet worden op alle kolommen in<br />

het gradecentre, of op een selectie kolommen. Indien gekozen wordt voor een<br />

selectie, dan verschijnt een scherm waarin de gewenste kolommen kunnen<br />

worden geselecteerd.<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—16/30


Figuur 1.6 Opties in Avarage Column<br />

Verder is er ook de optie Calculate as runing total. Als deze optie aan staat<br />

gevinkt, dan wordt bij het berekenen <strong>van</strong> de gemiddelde score een kolom niet<br />

meegerekend als de student geen resultaat heeft behaald voor die kolom. Als<br />

<strong>van</strong> studenten wordt vereist dat alle toetsen gemaakt worden en dat de<br />

eindscore <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> wordt berekend op basis <strong>van</strong> de<br />

gemiddelde score <strong>van</strong> al deze toetsen, dan dient de functie calculate as running<br />

total, niet te worden aangevinkt. Vervolgens zal blackboard de niet gemaakte<br />

toetsen als score 0 beschouwen, en zullen deze scores worden meegenomen in<br />

de berekening <strong>van</strong> het gemiddelde cijfer <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong>.<br />

1.4.4.2 Grading Schemas<br />

Een Grading Schema is een manier waarop een bepaald resultaat <strong>van</strong> het<br />

<strong>digitaal</strong> <strong>werkboek</strong> in blackboard wordt weergegeven. Standaard grading<br />

schemas zijn score of percentage, waarbij respectievelijk het totaal aantal<br />

punten op de toets, of het percentage goed beantwoorde vragen wordt<br />

weergegeven. Het is ook mogelijk om zelf grading schemas te maken. Dit kan<br />

door in het gradecentre te klikken op Manage -> Grading Schemas. Het kan<br />

bijvoorbeeld wenselijk zijn om in een kolom geen score of percentage weer te<br />

geven, maar een cijfer <strong>van</strong> 0 tot 10, zodat de student een beter inzicht heeft in<br />

de geleverde prestatie. Door te klikken op Create Grading Schema verschijnt<br />

er een scherm in beeld waarbij allereerst de naam <strong>van</strong> het nieuwe schema kan<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—17/30


worden aangegeven. Vervolgens kan worden ingesteld welke waarde in het<br />

schema (bijvoorbeeld het cijfer 8) hoort bij welk percentage goed beantwoorde<br />

vragen. Voor iedere mogelijke waarde die kan worden geleverd door het<br />

grading schema, dient een nieuwe Row te worden aangemaakt. Dit kan<br />

gedaan worden door te klikken op Insert Row. Stel dat de cijfers 1 t/m 10<br />

kunnen worden behaald, dan moeten er in totaal 10 rijen te worden gemaakt.<br />

Ook kan ervoor worden gekozen de cijfers 1 t/m 10 op een schaal <strong>van</strong> halve<br />

punten toe te kennen en daar bijvoorbeeld direct een gokcorrectie op toe te<br />

passen. In Figuur 1.7 staat een voorbeeld <strong>van</strong> een dergelijk grading schema.<br />

Dit schema bevat een gokkanscorrectie. Omdat de vragen multiple choice zijn,<br />

heb je altijd 25% kans op een goed antwoord. In het onderstaande schema is<br />

deze gokkans meegenomen, waardoor je 70% goed moet hebben om een 5,5 te<br />

halen.<br />

Figuur 1.7 Grading schema<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—18/30


2. Het onderhouden <strong>van</strong> een <strong>digitaal</strong> <strong>werkboek</strong><br />

In dit hoofdstuk volgen een aantal richtlijnen en tips om het <strong>digitaal</strong><br />

<strong>werkboek</strong> draaiende te houden gedurende de cursus. Ten eerste is het aan te<br />

raden om een coördinator aan te stellen die de inhoud <strong>van</strong> de oefeningen en<br />

toetsen bewaakt. Gedurende het jaar zal met verschillende docenten en<br />

medewerkers overlegd moeten worden over de inhoud <strong>van</strong> oefeningen en<br />

toetsen. Overige taken kunnen zijn het plaatsen <strong>van</strong> de opdrachten in het<br />

rooster, ervoor zorgen dat docenten op tijd het juiste oefenmateriaal en<br />

toetsvragen aanleveren, de oefeningen en toetsen in Bb plaatsen/maken,<br />

evaluaties plaatsen en analyseren, verbeteringen doorvoeren etc.<br />

Ten tweede moet er een aanspreekpunt zijn waar studenten terecht kunnen<br />

met vragen en foutmeldingen. Het is aan te raden om een apart email-adres te<br />

gebruiken waar alle mail over het <strong>digitaal</strong> <strong>werkboek</strong> binnenkomt. Het is<br />

handig om een student-assistent (met grondige kennis <strong>van</strong> Blackboard) aan te<br />

stellen die deze mail kan beantwoorden. Veel vragen <strong>van</strong> studenten kunnen<br />

onder<strong>van</strong>gen worden door duidelijke instructies te geven en een handleiding<br />

op Bb te plaatsen. Daarnaast hebben wij in de eerste week <strong>van</strong> de studie een<br />

oefentoets op Bb aangeboden die bestond uit vragen over praktische zaken<br />

over Bb en informatie uit de studiegids. Op deze manier kunnen studenten<br />

wennen aan Bb-toetsen en leren ze tegelijkertijd een aantal praktische zaken<br />

over de studie.<br />

Er zijn echter een aantal zaken waar studenten over mailen, die gedurende de<br />

cursus opgelost moeten worden. Zo kan het bijvoorbeeld voorkomen dat er<br />

een fout in een toets zit, dat een toets niet goed of te laat afgesloten wordt of<br />

dat een herkansing ingesteld moet worden. Hieronder worden deze situaties<br />

besproken en <strong>van</strong> tips voorzien.<br />

2.1 Fouten herstellen in de toets<br />

Door het omzetten <strong>van</strong> vragenbestanden, het uploaden in Bb en vervolgens<br />

het aanmaken <strong>van</strong> een toets met alle toetsopties is het mogelijk dat er een fout<br />

in de toets zit. Controleer daarom altijd alle toetsinstellingen en vragen<br />

voordat de toets door studenten gemaakt wordt. Zodra de toets openstaat en<br />

door een aantal studenten gemaakt is, is het vaak lastig om dingen aan te<br />

passen binnen de toets. Hieronder volgen mogelijke problemen en<br />

oplossingen:<br />

Een afbeelding die gebruikt wordt in één <strong>van</strong> de vragen <strong>van</strong> een toets<br />

wordt niet correct weergegeven. Dit kan worden opgelost door naar<br />

‘edit test’ te gaan, en vervolgens rechts bovenin het scherm te klikken<br />

op ‘question settings’. Hier staat onder punt 2 (images, files and external<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—19/30


links) de optie ‘Add images, files and external links to questions’ standaard<br />

uitgevinkt. Als deze optie wordt aangevinkt wordt de afbeelding wel<br />

correct weergegeven. Deze optie is overigens niet mogelijk bij open<br />

vragen en wel bij multiple choice vragen.<br />

Een vraag of de feedback bevat een fout of het juiste antwoord staat<br />

niet juist ingesteld. Omdat de vraag niet verwijderd kan worden als de<br />

toets loopt kan dit worden opgelost door de betreffende vraag op te<br />

zoeken (in de vragenpool of in de toets zelf) en vervolgens de vraag<br />

aan te passen. Vervolgens kunnen de studenten die de vraag op dat<br />

moment al hebben gemaakt, én deze fout hebben beantwoord, toch de<br />

punten toegekend krijgen. Punten kunnen worden toegekend door in<br />

het gradecentre de testresultaten <strong>van</strong> een individuele student op te<br />

vragen. Vervolgens kan per vraag het aantal punten worden aangepast<br />

dat de student heeft ont<strong>van</strong>gen.<br />

2.2 Het gradecenter<br />

2.2.1 Icoon:<br />

Studenten moeten een toets zelf op tijd submitten. Blackboard sluit de toets<br />

niet zelf af als de ingestelde tijd verstreken is. Dit kan tot gevolg hebben dat<br />

een toets te laat in wordt geleverd. Zorg dus voor een duidelijke instructie<br />

over het submitten <strong>van</strong> de toets.<br />

Als een student de toets niet binnen de aangegeven tijd heeft afgerond, dan<br />

verschijnt het groene icoontje met een uitroepteken in het gradecentre bij de<br />

betreffende student en gemaakte toets. Soms is dit icoontje terecht, zoals in<br />

situaties waar studenten echt minuten langer over de toets doen; maar het kan<br />

ook onterecht worden weergegeven, wat veroorzaakt wordt door een<br />

beperking <strong>van</strong> Blackboard. Als studenten enkele seconden voor de deadline<br />

de toets submitten, dan laat blackboard in de meeste gevallen dit symbool<br />

zien in het gradecentre, terwijl de studenten gewoon op tijd de toets hebben<br />

gesubmit. Blackboard heeft namelijk tijd nodig om het submitten te<br />

verwerken, waardoor altijd een aantal seconden wordt opgeteld (hoe groter<br />

de toets hoe meer seconden) bij de totale duur <strong>van</strong> de gemaakte toets.<br />

Indien de student terecht het icoontje in het gradecentre heeft gekregen, dan<br />

kan dit gewoon blijven staan en zal blackboard een score <strong>van</strong> 0 rekenen voor<br />

de betreffende toets. Indien de student onterecht het icoontje in het<br />

gradecentre heeft, dan kan dit simpelweg verwijderd worden door erop te<br />

klikken en vervolgens op enter te drukken. Nu verschijnt de juiste score <strong>van</strong><br />

de student in het gradecentre. In sommige gevallen verwerkt blackboard de<br />

enter niet goed en moet de handeling nog een paar keer worden herhaald.<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—20/30


Studenten met een dyslexie-verklaring kunnen toestemming krijgen om<br />

langer over de toetsen te doen. Dat betekent dat ze de toets standaard te laat<br />

submitten. Na iedere toets wordt het groene uitroepteken verwijderd voor alle<br />

dyslectici.<br />

2.2.2 Icoon:<br />

Als een student bezig is met de toets of deze niet goed heeft gesubmit<br />

verschijnt er een icoontje <strong>van</strong> een schriftje met pen in het gradecentre.<br />

Het niet goed afronden <strong>van</strong> de toets kan meerdere oorzaken hebben. In veel<br />

gevallen is de student op het moment <strong>van</strong> submitten niet meer ingelogd<br />

volgens blackboard. Dit zou veroorzaakt kunnen worden doordat<br />

bijvoorbeeld het internet tijdelijk uitvalt. Een andere oorzaak <strong>van</strong> het niet<br />

correct submitten <strong>van</strong> de toets is alleen <strong>van</strong> toepassing als de optie ‘forced<br />

completion’ is aangevinkt bij de ‘test options’. In dit geval wordt de student<br />

gedwongen de toets in één keer af te ronden. Op het moment dat de student<br />

per ongeluk de browser afsluit, is het niet meer mogelijk om opnieuw in te<br />

loggen en wordt de toets als niet gesubmit beschouwd.<br />

Als studenten tijdens het maken <strong>van</strong> de toets ieder antwoord afzonderlijk<br />

opslaan door op ‘save answer’ te klikken, dan blijven de gegeven antwoorden<br />

zichtbaar in blackboard. Indien studenten antwoorden niet hebben<br />

opgeslagen, dan leidt het niet correct submitten <strong>van</strong> de toets tot het verliezen<br />

<strong>van</strong> alle gegeven antwoorden. In het eerste geval kan het probleem eenvoudig<br />

worden opgelost, in het tweede wordt het lastiger.<br />

Als de student de antwoorden heeft opgeslagen dan kan in het gradecentre<br />

naast het icoontje worden geklikt op ‘view attempt … ‘. In dit scherm wordt<br />

vervolgens ‘test information’ geselecteerd en er verschijnt een knop met<br />

‘submit attempt’. Nu wordt de toets <strong>van</strong> de student correct gesubmit en<br />

wordt het juiste resultaat zichtbaar in het gradecentre.<br />

Indien de student de antwoorden niet heeft opgeslagen, of dat wel heeft<br />

gedaan maar nog niet alle antwoorden had gegeven, zit er niets anders op<br />

dan de student een herkansing aan te bieden voor de betreffende toets. Om<br />

dit te doen moet eerst weer in het gradecentre via ‘view attempt … ‘ naar ‘test<br />

information’ worden gegaan, om daar vervolgens te kiezen voor ‘remove<br />

attempt’. Nu kan de student de toets opnieuw maken. Indien de deadline <strong>van</strong><br />

de toets al is verstreken kan een ‘adaptive release’ voor de student worden<br />

ingesteld (zie § 2.3.2).<br />

2.3 Herkansing instellen<br />

In sommige situaties zal een student toestemming worden verleend om een<br />

toets <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> te herkansen. Het kan zijn dat studenten door<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—21/30


overmacht een toets niet kunnen maken. Als het hierbij gaat om persoonlijke<br />

omstandigheden hanteren wij de regel dat de student dit voor de deadline<br />

moet aangeven en dat de overmachtsituatie geldt voor de gehele toetsperiode<br />

(studenten hebben namelijk 2 dagen de tijd om de toets te maken). In het<br />

geval <strong>van</strong> technische storingen hanteren wij de regel dat studenten zelf<br />

verantwoordelijk zijn voor een werkende computer met werkend internet. De<br />

UvA biedt daarnaast genoeg computers met stabiele internetverbinding.<br />

Alleen in het geval <strong>van</strong> Blackboard storingen of een storing op een UvAcomputer<br />

wordt een herkansing gegeven. Begin 2010-2011 hadden wij minder<br />

strenge regels en stond in de instructie dat in het geval <strong>van</strong> een technisch<br />

probleem zoals een computercrash een herkansing mogelijk was. Onze<br />

ervaring was dat het regende met mails over gecrashte computers,<br />

internetverbindingen, gecrashte muizen en toetsenborden. Nu horen wij daar<br />

zelden meer iets <strong>van</strong>.<br />

2.3.1 Een herkansing geven voordat de deadline sluit.<br />

Wanneer er sprake is <strong>van</strong> een storing tijdens een toets kan een nieuwe kans<br />

gegeven worden door de toetspoging te verwijderen middels “clear attempt”.<br />

De handigste manier om dit te doen is als volgt. Klik in het Grade Centre op<br />

View Grade Details (zie Figuur 2.1)<br />

Figuur 2.1 View grade details<br />

Vervolgens klik je op View attempt en krijg je de toets met de eventuele<br />

antwoorden <strong>van</strong> de student in beeld. Bovenin beeld klik je op Test<br />

Information. Vervolgens verschijnt de testinformatie <strong>van</strong> de betreffende<br />

student (zie Figuur 2.2) Hier kies je voor “Clear Attempt” om de poging te<br />

verwijderen, zodat de student opnieuw de toets kan maken (mits de deadline<br />

nog niet voorbij is), of voor “Submit Attempt” om de toets met antwoorden<br />

namens de student in te leveren, wanneer die bewaard zijn.<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—22/30


Figuur 2.2 Test informatie<br />

2.3.2 Adaptive Release instellen<br />

Als de deadline <strong>van</strong> een toets is verstreken en er moet een herkansing voor<br />

een student worden ingesteld, dan kan dit worden gedaan met behulp <strong>van</strong><br />

een adaptive release. Een adaptive release is een functie waarmee een<br />

onderdeel op blackboard beschikbaar kan worden gesteld aan een selectie<br />

studenten. Het is overigens <strong>van</strong> belang dat er geen andere weergaverestricties<br />

actief zijn op het betreffende onderdeel. Stel dat staat ingesteld dat een<br />

onderdeel wordt weergegeven <strong>van</strong> 1 mei tot 1 juni, en op 10 juni wil een<br />

student een toets herkansen, dan moet eerst de weergaverestrictie <strong>van</strong> 1 mei<br />

tot 1 juni worden uitgezet, voordat de adaptieve release effect kan hebben.<br />

Een adaptive release kan worden ingesteld door bij het gewenste onderdeel<br />

op de twee pijltjes rechts er<strong>van</strong> te klikken en vervolgens te kiezen voor<br />

“Adaptive Release”. Er verschijnt een scherm waar allereerst de data kunnen<br />

worden ingesteld waarbinnen het onderdeel beschikbaar moet zijn.<br />

Daarna kan worden aangegeven voor welke studenten dit onderdeel<br />

beschikbaar moet zijn. Studenten kunnen individueel worden toegevoegd op<br />

basis <strong>van</strong> hun studentnummer. Als het om grote aantallen studenten gaat is<br />

het handiger om een groep aan te maken met daarin de betreffende studenten<br />

en vervolgens deze groep te selecteren bij het instellen <strong>van</strong> de adaptieve<br />

release (zie § 2.3.4).<br />

2.3.3 Adaptive Release checken<br />

Je kunt een groep of een individuele student opnieuw toegang geven tot een<br />

toets met Adaptive Release. Het is niet altijd duidelijk of een student ook echt<br />

toegang heeft tot een toets die je voor haar geopend hebt. Dit kun je altijd<br />

checken door op de dubbele pijltjes naast een folder te klikken, en vervolgens<br />

op User Progress te klikken (zie Figuur 2.3). Hier zie je vervolgens aan het<br />

icoontje, onder visibility, of een bepaalde student inderdaad de folder kan<br />

zien.<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—23/30


Figuur 2.3 User progress<br />

2.3.4 Adaptive release voor grote groepen<br />

Soms komt het voor dat een grote groep studenten een herkansing krijgt voor<br />

een toets, en het daardoor erg lang gaat duren om al deze studenten één voor<br />

één handmatig een adaptive release te geven. Dit probleem kan sneller<br />

worden opgelost door de betreffende studenten op de blackboard pagina lid<br />

te maken <strong>van</strong> een groep en vervolgens de adaptive release voor alle leden <strong>van</strong><br />

die groep in te stellen. Hiervoor moet eerst in Excel een bestand worden<br />

gemaakt met daarin drie kolommen (zie Figuur 2.4). In kolom B staan de<br />

studentnummers <strong>van</strong> alle studenten die je aan de groep op blackboard wilt<br />

toewijzen. In kolom A staat voor ieder <strong>van</strong> die studenten steeds dezelfde<br />

cursuscode (het gaat immers om maar één vak), en in kolom C staat voor<br />

ieder <strong>van</strong> de studenten de naam <strong>van</strong> de groep waar ze aan moeten worden<br />

toegewezen (deze groep hoeft nog niet te bestaan). Vervolgens wordt dit<br />

bestand opgeslagen als Comma separated file (.csv).<br />

Figuur 2.4 Excelbestand voor het instellen <strong>van</strong> een adaptive release voor groepen<br />

Dit bestand kan op de blackboard pagina <strong>van</strong> de betreffende cursus worden<br />

geupload (Course management -> Course tools -> Group batch enroll).<br />

Vervolgens kan, zoals in Figuur 2.5 te zien is, een adaptive release worden<br />

ingesteld voor de groep door naar de betreffende opdracht te gaan en op de<br />

twee pijltjes naar beneden te klikken en vervolgens op ‘adaptive release’.<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—24/30


Figuur 2.5 Instellen adaptive release<br />

Figuur 2.6 Selecteren <strong>van</strong> een groep studenten voor een adaptive release<br />

Ten slotte kan de betreffende groep worden verschoven <strong>van</strong> de linker- naar<br />

de rechterkolom (zie Figuur 2.6), en rechtsboven (of onder) op submit worden<br />

geklikt.<br />

Het is ook mogelijk om puur <strong>van</strong>uit blackboard een adaptive release voor een<br />

groep studenten in te stellen, zonder dat gebruik hoeft te worden gemaakt<br />

<strong>van</strong> Excel. Dit gaat op dezelfde manier als hierboven beschreven, alleen moet<br />

de groep direct in blackboard worden aangemaakt in plaats <strong>van</strong> in Excel<br />

(Course management -> Users and Groups -> Groups). Vervolgens moet<br />

worden gekozen voor ‘’create single group’’ en daarna ‘’manual enroll’’ (zie<br />

Figuur 2.7).<br />

Figuur 2.7 Groep aanmaken in blackboard<br />

Er verschijnt een scherm waar informatie over de groep kan worden ingesteld<br />

en ten slotte kan onderin worden aangegeven welke gebruikers lid moeten<br />

worden <strong>van</strong> de groep (zie Figuur 2.8)<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—25/30


Figuur 2.8 Instellen groepslidmaatschap<br />

2.4 Problemen met Maple T.A.<br />

In het jaar 2010-2011 zijn voor het vak Onderzoeksmethoden & Statistiek<br />

oefeningen en toetsen via Maple T.A. aanboden. We liepen echter tegen een<br />

aantal technische problemen of onhandigheden aan, waardoor we dit jaar<br />

hebben gekozen voor andere oefeningen en toetsen. Waar wij tegenaan liepen<br />

was dat het gradebook <strong>van</strong> Maple T.A. en het gradecentre <strong>van</strong> Bb niet goed<br />

synchroniseerden. Dit was vooral het geval bij herkansingen of aanpassingen<br />

in scores nadat een toets gemaakt was. Daarnaast moet er zeer nauwkeurig<br />

geantwoord worden door een student (punten, komma’s, decimalen, open<br />

vragen) waardoor vaak door een punt/komma verwisseling al scoreverlies<br />

was. Aangezien de toetsen meetelden voor een cijfer gaf dit veel<br />

ontevredenheid bij studenten en correctiewerk voor medewerkers. Zodra<br />

Maple T.A. alleen gebruikt wordt om te oefenen vervalt dit probleem en biedt<br />

het systeem vele voordelen.<br />

In het geval dat Maple T.A. binnen Bb gebruikt wordt volgen hieronder<br />

instructies om een herkansing in te stellen of een cijfer aan te passen.<br />

2.4.1 Een herkansing instellen<br />

Wanneer een student herkansing mag krijgen, gaan we eerst naar<br />

/Course Tools<br />

/Maple T.A. Instructor Menu<br />

We komen nu in het Maple T.A. menu. We klikken linksboven op Actions, en<br />

selecteren dan Proctor Tools. Het zoekscherm werkt niet helemaal lekker. Het<br />

beste kunnen we zoeken op (zie Figuur 2.9).<br />

Achternaam<br />

met Exact als Match<br />

Unfiltered als Authorization Mode<br />

Assignment filter moet leeg zijn<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—26/30


Figuur 2.9 Student zoeken in Maple T.A.<br />

We klikken nu op Search, en vervolgens klikken we op het vinkje voor de<br />

student die een nieuwe poging mag. Bij permission vullen we in “Start and<br />

Grade” en in de dropdownlist kiezen we de toets waar het om gaat.<br />

Vervolgens klikken we op Authorize (zie Figuur 2.10).<br />

Figuur 2.10 Instellen herkansing in Maple T.A.<br />

Hiermee heeft de student binnen Maple T.A. een herkansing gekregen. In<br />

Blackboard moet je vervolgens in het Grade Centre het cijfer verwijderen,<br />

door Clear Grade te kiezen. (Wanneer je dit niet doet, en de student krijgt een<br />

nieuwe kans, dan wordt het cijfer niet door het nieuwe cijfer overschreven.)<br />

Aan studenten wordt de volgende instructie gemaild:<br />

Klik op Request Exception. Vervolgens op Remotely Authorized. Als het goed<br />

is kan de toets nu opnieuw gemaakt worden.<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—27/30


2.4.2 Cijfers corrigeren<br />

Het kan voorkomen dat een vraag een fout bevat of het automatisch nakijken<br />

niet naar wens is verlopen. Een docent kan dan beslissen om een gemaakte<br />

vraag alsnog goed te keuren. Dit werkt als volgt.<br />

Om de antwoorden <strong>van</strong> studenten te bekijken gaan we naar het Maple T.A. in<br />

Instructor Menu. Daar selecteer je de toets, en klikt vervolgens op submit. Je<br />

kunt nu een student aanklikken. Wanneer je onderaan op Details… klikt, kun<br />

je de eigenlijke antwoorden <strong>van</strong> de student zien. Naast de antwoorden<br />

kunnen de scores handmatig aangepast worden. Klik op opslaan of update.<br />

Het gradebook <strong>van</strong> Maple T.A. heeft nu een aangepaste score geregistreerd.<br />

Deze score wordt echter niet automatisch door het gradecentre <strong>van</strong> Bb<br />

overgenomen. In het gradecentre moet dus alsnog het nieuwe cijfer ingevoerd<br />

worden. Pas dan ziet de student via my grades de aangepaste score.<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—28/30


3. Contactinformatie<br />

Dit document is samengesteld door medewerkers <strong>van</strong> de ICTO afdeling<br />

Psychologie aan de <strong>Universiteit</strong> <strong>van</strong> <strong>Amsterdam</strong>. Voor vragen en/of<br />

suggesties voor uitbreidmogelijkheden kunt u contact opnemen met<br />

onderstaande medewerkers:<br />

Maartje Prevosth<br />

Coördinator Digitaal Werkboek<br />

Tel: 0205256912<br />

E-mail: M.M.Prevosth@uva.nl<br />

Paul Lodder<br />

Student-assistent ICTO<br />

Tel: 0205256907<br />

E-mail: P.lodder@uva.nl<br />

Blackboard Psychologie<br />

E-mail: psy-blackboard-fmg@uva.nl<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—29/30


Appendix<br />

Checklist <strong>digitaal</strong> <strong>werkboek</strong><br />

Voorafgaand aan een oefening en/of toets:.<br />

• Controleer tekst en ingestelde data/tijden waarop de oefening<br />

en/of toets beschikbaar zou moeten zijn<br />

• Controleer de vragenpools (juiste weergave en antwoord <strong>van</strong> de<br />

vragen)<br />

• Controleer de toetsinstellingen (bijvoorbeeld: force completion uit,<br />

timer aan)<br />

• Controleer de inhoud <strong>van</strong> de toets (correct aantal vragen, vragen<br />

horen bij te bestuderen stof)<br />

• Controleer gradecentre (kolom zichtbaar, possible points correct,<br />

due dates eruit, juiste weergave cijfer/score etc)<br />

• Controleer gradecentre onder studentaccount<br />

• Test de oefening en toets onder studentaccount (test accounts<br />

kunnen worden aangemaakt door de ICT medewerkers)<br />

Check?<br />

……….<br />

……….<br />

……….<br />

……….<br />

……….<br />

……….<br />

……….<br />

Versie 1.1, december 2011<br />

ICTO Psychologie—30/30

Hooray! Your file is uploaded and ready to be published.

Saved successfully!

Ooh no, something went wrong!