Protocol digitaal werkboek - Universiteit van Amsterdam
Protocol digitaal werkboek - Universiteit van Amsterdam
Protocol digitaal werkboek - Universiteit van Amsterdam
You also want an ePaper? Increase the reach of your titles
YUMPU automatically turns print PDFs into web optimized ePapers that Google loves.
<strong>Protocol</strong> <strong>digitaal</strong> <strong>werkboek</strong><br />
<strong>Universiteit</strong> <strong>van</strong> <strong>Amsterdam</strong><br />
Afdeling Psychologie
Inhoudsopgave<br />
Voorwoord _________________________________________________________ 3<br />
Het <strong>digitaal</strong> <strong>werkboek</strong> ___________________________________________________ 3<br />
1. Het opzetten <strong>van</strong> een <strong>digitaal</strong> <strong>werkboek</strong> ______________________________ 4<br />
1.1 De structuur <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> ________________________________ 4<br />
1.2 Implementatie in het huidige onderwijs ________________________________ 5<br />
1.3 De interactieve oefeningen____________________________________________ 5<br />
1.3.1 Oefeningen plaatsen in Blackboard _________________________________________ 6<br />
1.3.2 Zelf oefeningen maken ___________________________________________________ 6<br />
1.3.3. Overige tips bij het maken <strong>van</strong> oefeningen __________________________________ 7<br />
1.4 De Digitale Toetsen __________________________________________________ 8<br />
1.4.1 Het gebruik <strong>van</strong> vragenpools ______________________________________________ 8<br />
1.4.3 Het maken <strong>van</strong> een toets _________________________________________________ 10<br />
1.4.4 Het gradecentre ________________________________________________________ 14<br />
1.4.4.1 Kolommen organiseren ________________________________________________ 15<br />
1.4.4.2 Grading Schemas______________________________________________________ 17<br />
2. Het onderhouden <strong>van</strong> een <strong>digitaal</strong> <strong>werkboek</strong> _________________________ 19<br />
2.1 Fouten herstellen in de toets _________________________________________ 19<br />
2.2 Het gradecenter _____________________________________________________ 20<br />
2.2.1 Icoon: ______________________________________________________________ 20<br />
2.2.2 Icoon: ______________________________________________________________ 21<br />
2.3 Herkansing instellen ________________________________________________ 21<br />
2.3.1 Een herkansing geven voordat de deadline sluit. ____________________________ 22<br />
2.3.2 Adaptive Release instellen _______________________________________________ 23<br />
2.3.3 Adaptive Release checken ________________________________________________ 23<br />
2.3.4 Adaptive release voor grote groepen ______________________________________ 24<br />
2.4 Problemen met Maple T.A. __________________________________________ 26<br />
2.4.1 Een herkansing instellen _________________________________________________ 26<br />
2.4.2 Cijfers corrigeren _______________________________________________________ 28<br />
3. Contactinformatie ________________________________________________ 29<br />
Appendix _____________________________________________________________ 30<br />
Checklist <strong>digitaal</strong> <strong>werkboek</strong> __________________________________________________ 30<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—2/30
Het <strong>digitaal</strong> <strong>werkboek</strong><br />
Voorwoord<br />
In het kader <strong>van</strong> studiesucces is de UvA in 2010 begonnen met het<br />
ontwikkelen <strong>van</strong> een <strong>digitaal</strong> <strong>werkboek</strong> voor eerstejaars<br />
psychologiestudenten. Het doel was om <strong>van</strong>uit ICT een ondersteunende<br />
structuur te bieden, waarbinnen studenten gestimuleerd worden om continu<br />
met de stof bezig te zijn, waardoor er beter wordt gestudeerd, uitstelgedrag<br />
wordt voorkomen en studenten <strong>van</strong>af dag één aan het studeren zijn.<br />
Met dit doel voor ogen hebben we wekelijkse opdrachten aangeboden op<br />
Blackboard bestaande uit een interactieve oefening over de collegestof en een<br />
toets. We zijn begonnen met de eerste vakken <strong>van</strong> het studiejaar 2010-2011,<br />
Inleiding & Cognitie en Onderzoeksmethoden & Statistiek. Op basis <strong>van</strong> onze<br />
ervaringen, studentevaluaties, een panelgesprek en docentevaluaties hebben<br />
we het <strong>digitaal</strong> <strong>werkboek</strong> verder ontwikkeld en uitgebreid naar alle<br />
propedeusevakken.<br />
Inmiddels zijn we een jaar verder, zijn de kinderziektes aangepakt en hebben<br />
we een goed lopende digitale onderwijsvorm voor het propedeusejaar<br />
psychologie. Door de positieve resultaten en de groeiende interesse voor<br />
<strong>digitaal</strong> toetsen en e-learning in het hoger onderwijs delen wij graag onze<br />
kennis en ervaring <strong>van</strong> het afgelopen jaar.<br />
Dit protocol geeft een overzicht <strong>van</strong> praktische tips voor het opzetten en<br />
draaiende houden <strong>van</strong> een <strong>digitaal</strong> <strong>werkboek</strong>. Om onze ervaringen tot nu toe<br />
zo bruikbaar mogelijk te maken hebben we voor zowel de interactieve<br />
oefeningen als de toetsen aangegeven hoe wij deze hebben vormgegeven,<br />
welke Blackboard-instellingen we gebruikt hebben (incl. screenshots) en<br />
welke problemen je tegen kunt komen en hoe deze op te lossen. Vervolgens<br />
geven we een aantal praktische tips over wie en wat nodig is om een <strong>digitaal</strong><br />
<strong>werkboek</strong> draaiende te houden gedurende een cursus.<br />
Het <strong>digitaal</strong> <strong>werkboek</strong> werd mogelijk gemaakt door Maartje Prevosth<br />
(conceptontwikkeling, coördinatie, implementatie en ontwikkeling), Peter<br />
Starreveld (conceptontwikkeling en inhoudelijke invulling), Caspar<br />
Groeneveld en Paul Lodder (technische ondersteuning), Klaas Visser<br />
(financiële ondersteuning), ICTO UvA (financiële ondersteuning) en de<br />
docenten (inhoudelijke invulling).<br />
M. Prevosth MSc<br />
Coördinator Digitaal Werkboek<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—3/30
1. Het opzetten <strong>van</strong> een <strong>digitaal</strong> <strong>werkboek</strong><br />
1.1 De structuur <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong><br />
Bij het ontwerpen <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> op een blackboard pagina <strong>van</strong><br />
een cursus is het handig om de opdrachten volgens een bepaald format te<br />
ontwerpen, zodat de student kan wennen aan een bepaalde manier <strong>van</strong><br />
opdracht afname. Het is aan te raden om dit format consistent te houden<br />
gedurende het jaar.<br />
De structuur <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> op de UvA ziet er als volgt uit. Binnen<br />
de blackboardpagina <strong>van</strong> een cursus is een map aangemaakt waar de <strong>digitaal</strong><br />
<strong>werkboek</strong> opdrachten in verschijnen op het moment dat ze door studenten<br />
gemaakt kunnen worden (zie Figuur 1.1). Daar staat ook een handleiding met<br />
FAQs en contactgegevens voor het geval <strong>van</strong> technische problemen. Elke<br />
week verschijnt er een opdracht die bestaat uit een digitale interactieve<br />
oefening die gedurende de hele week gemaakt kan worden. De oefening gaat<br />
over de collegestof <strong>van</strong> die week. Hoe deze oefeningen er precies uit zien staat<br />
onder paragraaf 1.3 beschreven. Naast de oefening is er een cumulatieve (de<br />
stof tot dan toe) multiple choice (MC)-toets om de week af te sluiten. De<br />
deadline is altijd op dezelfde dag. Hoe de toetsen precies zijn opgebouwd<br />
staat onder paragraaf 1.4 beschreven.<br />
Figuur 1.1: Beginscherm <strong>van</strong> de map ‘Digitaal Werkboek’<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—4/30
Om studenten te stimuleren om de oefeningen en toetsen serieus te maken is<br />
gekozen voor het meenemen <strong>van</strong> de resultaten in het eindcijfer <strong>van</strong> een vak.<br />
De interactieve oefeningen zijn daarbij niet verplicht maar in de toets zijn<br />
telkens twee vragen opgenomen over de oefening. De toetsen zelf zijn ook<br />
niet verplicht om een vak te halen, maar het gemiddelde telt voor zo’n 10%<br />
<strong>van</strong> het eindcijfer mee. Dit lijkt genoeg te zijn om studenten daadwerkelijk<br />
aan de slag te krijgen. In de evaluaties <strong>van</strong> het vak Inleiding & Cognitie geeft<br />
80% <strong>van</strong> de studenten aan alle (niet verplichte) oefeningen gemaakt te hebben,<br />
naast de toetsen die alle studenten gemaakt hebben.<br />
1.2 Implementatie in het huidige onderwijs<br />
Bij het implementeren <strong>van</strong> een nieuwe werkvorm zoals het <strong>digitaal</strong> <strong>werkboek</strong><br />
is een heldere communicatie naar studenten en docenten zeer belangrijk.<br />
Hieronder volgen een aantal voorwaarden:<br />
o<br />
o<br />
o<br />
o<br />
o<br />
o<br />
Zorg ervoor dat docenten, begeleiders <strong>van</strong> werkgroepen en<br />
studieadviseurs goed op de hoogte zijn <strong>van</strong> de structuur en<br />
inhoud <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong>.<br />
Laat docenten in de colleges verwijzen naar de digitale oefeningen<br />
zodat studenten serieus aan de slag gaan.<br />
Stem de inhoud <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> goed af met de colleges<br />
en werkgroepen.<br />
Zorg voor één aanspreekpunt voor studenten wat betreft het<br />
<strong>digitaal</strong> <strong>werkboek</strong> (bijv. een apart email-adres). Onze ervaring is<br />
dat studenten naar allerlei partijen mailen met vragen (naar<br />
docenten, begeleiders, studieadviseurs, de onderwijsbalie)<br />
ondanks dat op blackboard duidelijk staat aangegeven hoe ze<br />
contact op kunnen nemen. Om een hoop verwarring,<br />
doorstuurmail en inconsistente antwoorden te vermijden is het het<br />
meest praktisch om alle partijen naar blackboard te laten verwijzen,<br />
waar studenten zelf in de handleiding de juiste contactgegevens<br />
kunnen vinden.<br />
Zorg voor een overzichtelijke blackboardpagina, met duidelijke<br />
instructies, FAQs, rooster etc.<br />
Integreer de deadlines <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> in het college en<br />
werkgroeprooster, zodat studenten een goed overzicht hebben <strong>van</strong><br />
alle werkvormen en deadlines.<br />
1.3 De interactieve oefeningen<br />
De interactieve oefeningen in het <strong>digitaal</strong> <strong>werkboek</strong> dienen ter verlevendiging<br />
en verdieping <strong>van</strong> onderwerpen die in het college aan bod zijn gekomen. In<br />
overleg met de docent zijn de onderwerpen <strong>van</strong> de oefeningen bepaald. Het<br />
kan gaan om lastige onderwerpen waar extra aandacht en oefening gewenst is,<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—5/30
om onderwerpen die wel belangrijk zijn maar waar weinig tijd voor was in<br />
het college of onderwerpen die zich beter lenen voor simulaties en<br />
beeldmateriaal dan voor gesproken collegevorm.<br />
1.3.1 Oefeningen plaatsen in Blackboard<br />
Digitale oefeningen zijn op verschillende manieren te creëren binnen Bb. In<br />
eerste instantie is zoveel mogelijk gebruik gemaakt <strong>van</strong> bestaande oefeningen<br />
<strong>van</strong> uitgevers en universiteiten. Tegenwoordig hebben veel studieboeken een<br />
bijbehorende website waar bruikbare simulaties en oefeningen te vinden zijn.<br />
Voorbeelden <strong>van</strong> oefeningen voor het vak Inleiding in de Psychologie zijn<br />
PsychSim en ZAP (zeer actieve psychologie).<br />
In Bb kan eenvoudig een link gemaakt worden naar dit soort oefeningen via<br />
build-content - URL. Tip: gebruik de instelling open in new window (zie Figuur<br />
1.2). Een onhandigheid <strong>van</strong> Bb is namelijk dat externe links die in Bb geopend<br />
worden, niet meer kunnen afsluiten.<br />
Figuur 1.2 Open in new window<br />
1.3.2 Zelf oefeningen maken<br />
In het geval dat er geen geschikte oefeningen online voorhanden zijn kunnen<br />
deze in Bb gemaakt worden. De oefeningen die wij gemaakt hebben bestaan<br />
vaak uit een combinatie <strong>van</strong> beeld- of videomateriaal, een onderzoeksartikel<br />
en open vragen (via een survey of test) waar geautomatiseerd feedback op<br />
gegeven wordt.<br />
In het geval dat een oefening uit een aantal onderdelen bestaat kun je kiezen<br />
voor een learning module (via Build Content), waarin alle onderdelen achter<br />
elkaar doorlopen moeten worden in een overzichtelijk format (zie Figuur 1.3) .<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—6/30
Figuur 1.3 Voorbeeld <strong>van</strong> een ‘ learning modue’<br />
1.3.3. Overige tips bij het maken <strong>van</strong> oefeningen<br />
o Test de oefening in Bb via een studentaccount voordat<br />
studenten ermee aan de slag gaan.<br />
o Test de oefening in verschillende browsers. Soms werken<br />
sommige onderdelen of links niet goed in bepaalde browsers.<br />
o Vermeld de URL bij youtubefilmpjes die binnen Bb embedded<br />
zijn, zodat studenten evt. zelf het filmpje kunnen openen als het<br />
niet werkt.<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—7/30
1.4 De Digitale Toetsen<br />
Zoals eerder aangegeven bestaat elke opdracht in het <strong>digitaal</strong> <strong>werkboek</strong> uit<br />
een oefening en een toets. De toetsen op de UvA hebben een cumulatief<br />
karakter, wat inhoudt dat alle stof tot dan toe getoetst wordt. Door deze<br />
toetsen blijven de studenten niet alleen up-to-date, maar herhalen ze ook<br />
telkens de eerder geleerde stof tot aan het tentamen.<br />
Er zijn een aantal redenen om de toetsen cumulatief te maken. De eerste is dat<br />
de toetsen zo een beter beeld geeft <strong>van</strong> wat er geleerd moet worden voor de<br />
toets. Wanneer een toets alleen de stof <strong>van</strong> die week behandelt, lijkt de stof<br />
makkelijker en kan de student ten onrechte een gevoel <strong>van</strong> beheersing <strong>van</strong> de<br />
stof krijgen. Daarnaast is het herhaaldelijk ophalen <strong>van</strong> stof binnen een<br />
toetsomgeving in zichzelf een middel waar je goed <strong>van</strong> leert.<br />
De toetsen worden individueel gemaakt, elke student krijgt een set vragen die<br />
random uit vragenpools worden getrokken. Na elke toets ont<strong>van</strong>gt de student<br />
direct een cijfer en feedback waarin staat aangegeven of een vraag goed<br />
beantwoord is of niet en waar het juiste antwoord te vinden is. Deze feedback<br />
is een verwijzing naar het hoofdstuk in het boek. Een student ziet dus geen<br />
antwoordopties en ook niet het juiste antwoord. De resultaten komen<br />
vervolgens in het gradecenter terecht, dat elke student op elk gewenst<br />
moment kan openen.<br />
In de evaluaties geeft zo’n 90% <strong>van</strong> de studenten aan de toetsen nuttig te<br />
vinden gedurende het hele jaar. Aan het eind <strong>van</strong> het jaar geeft 68% <strong>van</strong> de<br />
studenten aan dat de oefeningen en toetsen hebben bijgedragen aan het<br />
bijhouden <strong>van</strong> de stof. Daarnaast zijn de correlaties berekend tussen de<br />
tentamens en de cijfers in het <strong>digitaal</strong> <strong>werkboek</strong>. Voor elk vak lag de correlatie<br />
rond de 0.6 (p < .01). Deze positieve resultaten hebben ons ertoe gezet om het<br />
<strong>digitaal</strong> <strong>werkboek</strong> voort te zetten in het huidige studiejaar. Hieronder wordt<br />
specifiek beschreven hoe je toetsen, zoals gebruikt in het <strong>digitaal</strong> <strong>werkboek</strong>,<br />
kunt aanmaken.<br />
1.4.1 Het gebruik <strong>van</strong> vragenpools<br />
Blackboard biedt verschillende mogelijkheden bij het maken <strong>van</strong> toetsen. De<br />
meest gebruikte vorm is de ‘multiple choice’, maar het is bijvoorbeeld ook<br />
mogelijk om ‘true/false’, ‘open question’, of ‘likert-scale’ te gebruiken. Alle<br />
soorten vragen kunnen handmatig worden ingevoerd, maar blackboard biedt<br />
ook de mogelijkheid om bestanden te uploaden met daarin een reeks vragen<br />
(ook wel een ‘vragenpool’ genoemd). Een voordeel <strong>van</strong> deze methode is dat<br />
het bij een grote hoeveelheid vragen sneller werkt dan wanneer alle vragen<br />
handmatig in blackboard worden ingevoerd.<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—8/30
Het programma Respondus kan de bronbestanden leveren die compatibel zijn<br />
met blackboard. Het voordeel <strong>van</strong> Respondus is dat dit programma de<br />
bestanden ook kan omzetten naar formats die in andere toetsprogramma’s<br />
kunnen worden gelezen, zoals Question Mark Perception.<br />
De input in Respondus is een bronbestand gemaakt in Microsoft Word, met<br />
daarin alle vragen die gebruikt moeten worden voor de vragenpool. Na<br />
enkele handelingen in Respondus is de output die het programma levert een<br />
Zip-bestand, dat direct in blackboard kan worden geupload. Er wordt<br />
geadviseerd om een aparte vragenpool in Word te maken voor iedere toets<br />
die uiteindelijk op blackboard moet worden ingevoerd. Het is belangrijk om<br />
iedere vraag in dezelfde opmaak te typen.<br />
Een voorbeeld <strong>van</strong> een vraag is:<br />
1) De snelheid <strong>van</strong> het actiepotentiaal is afhankelijk <strong>van</strong><br />
~ Meer uitleg kun je vinden in Hoofdstuk 2<br />
@ Meer uitleg kun je vinden in Hoofdstuk 2<br />
a) de hoeveelheid natrium buiten de cel.<br />
*b) de dikte <strong>van</strong> het axon.<br />
c) het aantal dendrieten dat een neuron heeft.<br />
Een vraag wordt altijd geopend met een nummer gevolgd door een<br />
haakjesluiten. Na een spatie volgt de vraag, die – afhankelijk <strong>van</strong> de manier<br />
waarop de vraag gesteld wordt – afgesloten wordt met de nodige interpunctie.<br />
Op de volgende regel volgt na een tab het teken: ~ dat symbool staat voor<br />
‘indien de vraag goed is beantwoord’. De informatie achter het symbool<br />
wordt aan studenten getoond die de vraag goed hebben beantwoord. De regel<br />
eronder houdt precies hetzelfde in, alleen nu staat het teken: @ symbool voor<br />
‘indien de vraag fout is beantwoord’. Op de daarop volgende regels<br />
verschijnen de antwoordmogelijkheden, waarbij een * wordt geplaatst voor<br />
het juiste antwoord. De volgende vraag kan op precies dezelfde manier<br />
worden gemaakt, en vragen worden gescheiden door een witregel.<br />
Nadat het bronbestand af is gemaakt kan Respondus worden opgestart.<br />
Raadpleeg uw systeembeheerder indien dit programma niet op uw werkplek<br />
is geïnstalleerd, of kijk voor meer informatie op www.respondus.com.<br />
In Respondus kan het Word-bestand worden omgezet naar een Zip-bestand.<br />
Allereerst moet gekozen worden voor ‘import file’. Vervolgens dient aan te<br />
worden gegeven dat het bronbestand een Microsoft Word bestand is (.doc).<br />
Daarna kan het bronbestand geselecteerd worden door het op te zoeken op de<br />
opgeslagen locatie. Vervolgens kan worden geklikt op ‘create new document’<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—9/30
en kan het document een naam worden gegeven. Om te testen of Respondus<br />
problemen opmerkt in het bestand wordt eerst op de knop ‘preview’ gedrukt.<br />
Indien er problemen zijn opgemerkt in het bronbestand verschijnen deze in<br />
beeld. Het gebeurt regelmatig dat er problemen worden opgemerkt die<br />
eigenlijk geen probleem zijn. Voor iedere vraag gebruikt Respondus de eerste<br />
paar woorden als korte vraagbeschrijving. Soms komt het voor dat de eerste<br />
woorden <strong>van</strong> verschillende vragen overeenkomen. Dit geeft Respondus als<br />
een error aan, maar kan dus worden genegeerd. Wel is het handig om even na<br />
te gaan of er niet echt twee dezelfde vragen in het bronbestand zaten, want<br />
dan zou dit wel een terecht probleem zijn. Een ander probleem dat<br />
Respondus opmerkt, maar vaak onterecht is, is het niet kunnen vinden <strong>van</strong><br />
‘choice alternatives’ voor een bepaalde vraag. Maar toch is het handig om<br />
even na te gaan of de betreffende vraag wel antwoordmogelijkheden heeft.<br />
Over het algemeen is het dus handig om bij een error even na te gaan of er<br />
daadwerkelijk sprake is <strong>van</strong> deze error, en als alles correct lijkt, dan kan de<br />
error genegeerd worden. Na het controleren <strong>van</strong> de errors kan ‘finish’ worden<br />
aangeklikt. Nu verschijnt een overzicht <strong>van</strong> alle vragen uit de pool. Als alles<br />
klopt dan kunnen deze vragen naar een zip bestand worden geëxporteerd.<br />
Klik boven in de menubalk op ‘preview and publish’. Vervolgens klik je op<br />
‘save pool to local file for manual uploading’. Daarna kan de plaats worden<br />
gekozen waar het bestand moet worden opgeslagen en ten slotte kan op<br />
‘finish’ worden geklikt.<br />
Nadat Respondus het Zip-bestand heeft gemaakt met daarin de vragenpools,<br />
kan dit bestand worden geupload op de blackboard pagina <strong>van</strong> de cursus<br />
waar de test voor moet worden gemaakt. Linksonder op de blackboard<br />
pagina staat de menubalk ‘course management’. Hierin staat onder het kopje<br />
‘Course Tools’ het subkopje ‘Tests, Surveys, and Pools’. Nadat op dit subkopje<br />
is geklikt verschijnt er een scherm in beeld waarin kan worden gekozen<br />
tussen tests, surveys, of pools. Om vragenpools te importeren dient op ‘pools’<br />
te worden geklikt en vervolgens op ‘import pools’.<br />
Via ‘browse computer’ kan het Zip-bestand worden geselecteerd op de plaats<br />
waar het is opgeslagen.<br />
1.4.3 Het maken <strong>van</strong> een toets<br />
Toetsen kunnen op twee manieren worden aangemaakt. De eerste manier is<br />
in het zelfde menu als waar de pools zijn aangemaakt (Course Management -><br />
Course Tools -> Tests, Surveys, and Pools). Dit is handig als toetsen gemaakt<br />
moeten worden die niet direct op de blackboard pagina moeten worden<br />
weergegeven. De toetsen komen terecht in een database waar <strong>van</strong>uit ze<br />
geselecteerd kunnen worden als een toets aan een content-area <strong>van</strong> een<br />
blackboard pagina moet worden toegevoegd. De tweede manier om een toets<br />
te maken is in de content-area <strong>van</strong> een blackboard pagina, zodat de toets direct<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—10/30
in deze area zichtbaar wordt. In de content-area kan worden gekozen voor<br />
‘create assessment’ en vervolgens voor ‘test’. Daarna verschijnt er een scherm<br />
waarin kan worden gekozen voor een bestaande toets uit de database (add test)<br />
of het zelf maken <strong>van</strong> een nieuwe test (create a new test). Als wordt gekozen<br />
voor het zelf maken <strong>van</strong> een toets, dan moet eerst een aantal gegevens over de<br />
test en instructies worden ingevoerd, voordat de vragen gemaakt kunnen<br />
worden. Er zijn meerdere manieren om vragen toe te voegen aan een toets. In<br />
het test menu verschijnen drie kopjes:<br />
Create Question: vragen worden één voor één gemaakt in blackboard.<br />
Bij deze mogelijkheid kan een groot aantal verschillend soorten vragen<br />
worden gebruikt.<br />
Reuse Question: een set vragen kan in één keer worden toegevoegd aan<br />
de toets. Door bijvoorbeeld voor ‘create random block’ te kiezen, kan<br />
een reeds gemaakte vragenpool worden geselecteerd waaruit<br />
willekeurig een bepaald aantal vragen aan de toets worden gekoppeld.<br />
Upload Questions: een bestand met vragen kan in één keer op<br />
blackboard worden geupload en aan de toets worden toegevoegd.<br />
Als alle vragen aan de test zijn toegevoegd kan het aantal punten voor iedere<br />
correct beantwoorde vragen worden ingesteld. Daarna kan op ‘ok’ worden<br />
geklikt en is de test klaar voor gebruik. Het is erg handig om de toets voor<br />
gebruik te testen, zodat eventuele fouten vroegtijdig opgelost kunnen worden.<br />
De bijlage bevat een checklist die hiervoor gebruikt kan worden.<br />
In het menu ‘test options’ kan een aantal opties worden ingesteld die<br />
belangrijk kunnen zijn bij het afnemen <strong>van</strong> bepaalde tests. Zoals in Figuur 1.4<br />
kan worden gezien is het handig om in te stellen dat de link <strong>van</strong> de toets<br />
‘available’ is. Vervolgens kan worden aangegeven tussen welke tijdsmomenten<br />
de toets zichtbaar wordt voor studenten. Verder kan een timer worden<br />
ingesteld.<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—11/30
Figuur 1.4 Test options<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—12/30
Zoals verder in bovenstaande figuur te zien is kan voor de optie ‘forced<br />
completion’ worden gekozen. Deze optie dwingt de student om de toets in één<br />
keer af te ronden. Er wordt geadviseerd deze optie niet aan te vinken. Als een<br />
student tijdens het maken <strong>van</strong> een toets het toetsscherm per ongeluk verlaat,<br />
kan de student niet meer terug als ‘forced completion’ staat aangevinkt. Omdat<br />
er vele manieren zijn om het toetsscherm te verlaten (bijvoorbeeld een klik op<br />
de zijkant <strong>van</strong> de muis, F5, een kopje in de menubalk <strong>van</strong> Bb, een ander<br />
tabblad of Escape) gebeurt dit dan ook veel. Het gevolg is dat de gemaakte<br />
vragen niet meer gesubmit kunnen worden door de student en er geen<br />
resultaat verschijnt in het gradecenter, maar een icoon met schriftje en pen.<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—13/30
Dit kan vervolgens alleen handmatig door een medewerker hersteld worden,<br />
wat veel onnodig werk oplevert. Oplossing: zet ‘forced completion’ uit en de<br />
timer aan. De student kan zo in en uit de toets, maar de tijd loopt gewoon<br />
door en de vragen die al gemaakt zijn blijven behouden.<br />
In Figuur 1.4 staan bij punt 4 feedbackopties die kunnen worden<br />
weergegeven na het maken <strong>van</strong> de test. De reden dat het correcte antwoord<br />
niet staat aangevinkt is dat studenten op die manier worden gestimuleerd de<br />
literatuur te raadplegen nadat ze een fout antwoord hebben gegeven, zodat ze<br />
zelf het juiste antwoord kunnen opzoeken en daar meer <strong>van</strong> leren dan dat het<br />
correcte antwoord zo wordt gepresenteerd bij de feedback.<br />
In Figuur 1.4 deel 5 wordt de mogelijkheid geboden om alle vragen <strong>van</strong> de<br />
toets tegelijkertijd aan te bieden, of één voor één. Verder kan ook de optie<br />
worden ingesteld dat bij sequentiële weergave <strong>van</strong> de vragen de student niet<br />
de mogelijkheid krijgt om een eerder beantwoorde vraag aan te passen. Deze<br />
optie wordt geadviseerd als vragen worden gebruikt die het antwoord <strong>van</strong><br />
eerder gestelde vragen zouden kunnen verraden. Ten slotte is het mogelijk<br />
om in te stellen dat de vragen willekeurig worden gepresenteerd of bij iedere<br />
toets volgens dezelfde volgorde.<br />
De in dit hoofdstuk beschreven procedure is een <strong>van</strong> de manieren waarop een<br />
toets kan worden gemaakt en zeker niet de enige juiste manier. Naar onze<br />
ervaring is dit een snelle en overzichtelijke manier waarop toetsen kunnen<br />
worden geconstrueerd, maar het is goed mogelijk dat er situaties zijn waarin<br />
andere manieren <strong>van</strong> testconstructie voordeliger zijn. Voor een overzicht <strong>van</strong><br />
de mogelijkheden <strong>van</strong> blackboard met betrekking tot het maken <strong>van</strong> toetsen<br />
verwijzen we naar de blackboard Instructors manual.<br />
1.4.4 Het gradecentre<br />
In het gradecentre wordt <strong>van</strong> alle studenten in de cursus de behaalde<br />
resultaten weergegeven. Het kan hier gaan om resultaten <strong>van</strong> het correct<br />
inleveren <strong>van</strong> opdrachten, tot een cijfer dat is verkregen voor het maken <strong>van</strong><br />
een meerkeuzetoets.<br />
Het is noodzakelijk om een kopje in de menubalk toe te voegen waarin<br />
studenten de resultaten <strong>van</strong> hun <strong>digitaal</strong> <strong>werkboek</strong> kunnen inzien. Dit kan<br />
door linksboven in de menubalk op het + symbool te klikken en vervolgens<br />
op ‘create tool link’. Uit de lijst selecteert u ‘my grades’. Als docent of<br />
medewerker kunt u deze pagina niet bekijken, omdat de inhoud <strong>van</strong> deze<br />
pagina afhangt <strong>van</strong> de resultaten <strong>van</strong> een bepaalde student. Wel hebben<br />
medewerkers inzicht in de resultaten <strong>van</strong> alle studenten in het gradecentre. Dit<br />
is te vinden linksonder door bij ‘course management’ te klikken op ‘grade centre’<br />
en vervolgens ‘full grade centre’.<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—14/30
1.4.4.1 Kolommen organiseren<br />
In het gradecentre zijn de resultaten <strong>van</strong> alle studenten zichtbaar. Voor elke<br />
toets die in Bb is aangemaakt verschijnt automatisch een kolom. Daarnaast<br />
hebben wij een average colomn toegevoegd waarin het gemiddelde <strong>van</strong> de<br />
gemaakte toetsen wordt weergegeven. De resultaten <strong>van</strong> de toetsen worden<br />
verder in cijfers (met een gokkanscorrectie) weergegeven. Dit cijfer is<br />
aangemaakt met een grading schema. Hieronder worden aan aantal opties<br />
verder uitgelegd.<br />
In het gradecentre kunnen kolommen worden toegevoegd met informatie<br />
over de student. Ook kan een kolom worden gemaakt waarbij de informatie<br />
wordt verkregen door middel <strong>van</strong> een formule. Denk hierbij aan het<br />
berekenen <strong>van</strong> de gemiddelde scores <strong>van</strong> studenten op de toetsen <strong>van</strong> het<br />
digitale <strong>werkboek</strong>. De soort kolommen die aan het gradecentre worden<br />
toegevoegd zijn afhankelijk <strong>van</strong> de manier waarop het <strong>digitaal</strong> <strong>werkboek</strong> voor<br />
een betreffende cursus is opgemaakt.<br />
Een voorbeeld opmaak zou kunnen zijn: Het <strong>digitaal</strong> <strong>werkboek</strong> <strong>van</strong> vak X<br />
bevat 10 meerkeuzetoetsen en 3 extra opdrachten. De gemiddelde score <strong>van</strong><br />
de meerkeuzetoetsen tellen voor 10% mee voor het eindcijfer <strong>van</strong> vak X. De<br />
kolommen waarin de scores <strong>van</strong> iedere meerkeuzetoets staan weergegeven,<br />
verschijnen automatisch in het <strong>digitaal</strong> <strong>werkboek</strong> bij het aanmaken <strong>van</strong> de<br />
betreffende toets. Per kolom kan vervolgens worden ingesteld of de score in<br />
punten of in percentages moet worden weergegeven. Daarnaast kan worden<br />
ingesteld of de kolom zichtbaar moet worden voor studenten. Kolommen<br />
waarin staat aangegeven of een extra opdracht via blackboard is ingeleverd,<br />
worden ook automatisch weergegeven bij het aanmaken <strong>van</strong> een inleverpunt<br />
in blackboard (bijvoorbeeld Ephorus assignment).<br />
Om de studenten beter inzicht te verschaffen in hun voorlopige resultaat op<br />
het <strong>digitaal</strong> <strong>werkboek</strong>, kan een nieuwe kolom worden aangemaakt waarin de<br />
gemiddelde score staat weergegeven <strong>van</strong> de meerkeuzetoetsen die de student<br />
heeft moeten maken. Er zijn twee opties om een nieuwe kolom aan te maken:<br />
“create column”, en “create calculated column”. In dit geval is het wenselijk dat<br />
blackboard berekeningen uitvoert over andere kolommen (het gemiddelde<br />
berekenen <strong>van</strong> de toetsen), waardoor gekozen moet worden voor “create<br />
calculated column”. Er zijn verschillende soorten calculated columns die door<br />
blackboard kunnen worden aangemaakt (zie Figuur 1.5).<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—15/30
Figuur 1.5 Create calculated column<br />
De Average Column wordt berekend op basis <strong>van</strong> de gemiddelde waarde <strong>van</strong><br />
een aantal geselecteerde andere kolommen. De Weighted Average Column<br />
wordt berekend op basis <strong>van</strong> een gewogen gemiddelde <strong>van</strong> een aantal<br />
geselecteerde andere kolommen. De weging <strong>van</strong> iedere kolom kan handmatig<br />
worden ingesteld. De Total Column wordt berekend door de waarde <strong>van</strong> de<br />
geselecteerde kolommen bij elkaar op te tellen. Ten slotte wordt in de<br />
Minimum/Maximum Column weergegeven wat de minimale of maximale<br />
waarde is die gevonden kan worden in de geselecteerde kolommen. Om voor<br />
studenten de gemiddelde score op de 10 meerkeuzetoetsen te laten berekenen<br />
kan het best gekozen worden voor create average column.<br />
Vervolgens verschijnt een scherm waarin informatie over de aan te maken<br />
kolom kan worden ingevuld. In deel 1 kan kolominformatie worden<br />
ingevoerd zoals hoe de kolom zal heten in het gradecentre. Daarnaast kan<br />
worden aangegeven op welke manier het resultaat wordt weergegeven in het<br />
gradecentre. Dit kan worden ingesteld bij primary display. Standaard is er de<br />
mogelijkheid om de resultaten als score of percentage weer te geven. Het is<br />
echter ook mogelijk om zelf een manier te creëren waarop het resultaat wordt<br />
weergegeven. Dit kan door een grading schema te maken (zie § 1.4.4.2). Bij deel<br />
3 <strong>van</strong> het invoeren <strong>van</strong> de kolominformatie (zie Figuur 1.6) kan worden<br />
aangegeven of het gemiddelde gebaseerd moet worden op alle kolommen in<br />
het gradecentre, of op een selectie kolommen. Indien gekozen wordt voor een<br />
selectie, dan verschijnt een scherm waarin de gewenste kolommen kunnen<br />
worden geselecteerd.<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—16/30
Figuur 1.6 Opties in Avarage Column<br />
Verder is er ook de optie Calculate as runing total. Als deze optie aan staat<br />
gevinkt, dan wordt bij het berekenen <strong>van</strong> de gemiddelde score een kolom niet<br />
meegerekend als de student geen resultaat heeft behaald voor die kolom. Als<br />
<strong>van</strong> studenten wordt vereist dat alle toetsen gemaakt worden en dat de<br />
eindscore <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> wordt berekend op basis <strong>van</strong> de<br />
gemiddelde score <strong>van</strong> al deze toetsen, dan dient de functie calculate as running<br />
total, niet te worden aangevinkt. Vervolgens zal blackboard de niet gemaakte<br />
toetsen als score 0 beschouwen, en zullen deze scores worden meegenomen in<br />
de berekening <strong>van</strong> het gemiddelde cijfer <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong>.<br />
1.4.4.2 Grading Schemas<br />
Een Grading Schema is een manier waarop een bepaald resultaat <strong>van</strong> het<br />
<strong>digitaal</strong> <strong>werkboek</strong> in blackboard wordt weergegeven. Standaard grading<br />
schemas zijn score of percentage, waarbij respectievelijk het totaal aantal<br />
punten op de toets, of het percentage goed beantwoorde vragen wordt<br />
weergegeven. Het is ook mogelijk om zelf grading schemas te maken. Dit kan<br />
door in het gradecentre te klikken op Manage -> Grading Schemas. Het kan<br />
bijvoorbeeld wenselijk zijn om in een kolom geen score of percentage weer te<br />
geven, maar een cijfer <strong>van</strong> 0 tot 10, zodat de student een beter inzicht heeft in<br />
de geleverde prestatie. Door te klikken op Create Grading Schema verschijnt<br />
er een scherm in beeld waarbij allereerst de naam <strong>van</strong> het nieuwe schema kan<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—17/30
worden aangegeven. Vervolgens kan worden ingesteld welke waarde in het<br />
schema (bijvoorbeeld het cijfer 8) hoort bij welk percentage goed beantwoorde<br />
vragen. Voor iedere mogelijke waarde die kan worden geleverd door het<br />
grading schema, dient een nieuwe Row te worden aangemaakt. Dit kan<br />
gedaan worden door te klikken op Insert Row. Stel dat de cijfers 1 t/m 10<br />
kunnen worden behaald, dan moeten er in totaal 10 rijen te worden gemaakt.<br />
Ook kan ervoor worden gekozen de cijfers 1 t/m 10 op een schaal <strong>van</strong> halve<br />
punten toe te kennen en daar bijvoorbeeld direct een gokcorrectie op toe te<br />
passen. In Figuur 1.7 staat een voorbeeld <strong>van</strong> een dergelijk grading schema.<br />
Dit schema bevat een gokkanscorrectie. Omdat de vragen multiple choice zijn,<br />
heb je altijd 25% kans op een goed antwoord. In het onderstaande schema is<br />
deze gokkans meegenomen, waardoor je 70% goed moet hebben om een 5,5 te<br />
halen.<br />
Figuur 1.7 Grading schema<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—18/30
2. Het onderhouden <strong>van</strong> een <strong>digitaal</strong> <strong>werkboek</strong><br />
In dit hoofdstuk volgen een aantal richtlijnen en tips om het <strong>digitaal</strong><br />
<strong>werkboek</strong> draaiende te houden gedurende de cursus. Ten eerste is het aan te<br />
raden om een coördinator aan te stellen die de inhoud <strong>van</strong> de oefeningen en<br />
toetsen bewaakt. Gedurende het jaar zal met verschillende docenten en<br />
medewerkers overlegd moeten worden over de inhoud <strong>van</strong> oefeningen en<br />
toetsen. Overige taken kunnen zijn het plaatsen <strong>van</strong> de opdrachten in het<br />
rooster, ervoor zorgen dat docenten op tijd het juiste oefenmateriaal en<br />
toetsvragen aanleveren, de oefeningen en toetsen in Bb plaatsen/maken,<br />
evaluaties plaatsen en analyseren, verbeteringen doorvoeren etc.<br />
Ten tweede moet er een aanspreekpunt zijn waar studenten terecht kunnen<br />
met vragen en foutmeldingen. Het is aan te raden om een apart email-adres te<br />
gebruiken waar alle mail over het <strong>digitaal</strong> <strong>werkboek</strong> binnenkomt. Het is<br />
handig om een student-assistent (met grondige kennis <strong>van</strong> Blackboard) aan te<br />
stellen die deze mail kan beantwoorden. Veel vragen <strong>van</strong> studenten kunnen<br />
onder<strong>van</strong>gen worden door duidelijke instructies te geven en een handleiding<br />
op Bb te plaatsen. Daarnaast hebben wij in de eerste week <strong>van</strong> de studie een<br />
oefentoets op Bb aangeboden die bestond uit vragen over praktische zaken<br />
over Bb en informatie uit de studiegids. Op deze manier kunnen studenten<br />
wennen aan Bb-toetsen en leren ze tegelijkertijd een aantal praktische zaken<br />
over de studie.<br />
Er zijn echter een aantal zaken waar studenten over mailen, die gedurende de<br />
cursus opgelost moeten worden. Zo kan het bijvoorbeeld voorkomen dat er<br />
een fout in een toets zit, dat een toets niet goed of te laat afgesloten wordt of<br />
dat een herkansing ingesteld moet worden. Hieronder worden deze situaties<br />
besproken en <strong>van</strong> tips voorzien.<br />
2.1 Fouten herstellen in de toets<br />
Door het omzetten <strong>van</strong> vragenbestanden, het uploaden in Bb en vervolgens<br />
het aanmaken <strong>van</strong> een toets met alle toetsopties is het mogelijk dat er een fout<br />
in de toets zit. Controleer daarom altijd alle toetsinstellingen en vragen<br />
voordat de toets door studenten gemaakt wordt. Zodra de toets openstaat en<br />
door een aantal studenten gemaakt is, is het vaak lastig om dingen aan te<br />
passen binnen de toets. Hieronder volgen mogelijke problemen en<br />
oplossingen:<br />
Een afbeelding die gebruikt wordt in één <strong>van</strong> de vragen <strong>van</strong> een toets<br />
wordt niet correct weergegeven. Dit kan worden opgelost door naar<br />
‘edit test’ te gaan, en vervolgens rechts bovenin het scherm te klikken<br />
op ‘question settings’. Hier staat onder punt 2 (images, files and external<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—19/30
links) de optie ‘Add images, files and external links to questions’ standaard<br />
uitgevinkt. Als deze optie wordt aangevinkt wordt de afbeelding wel<br />
correct weergegeven. Deze optie is overigens niet mogelijk bij open<br />
vragen en wel bij multiple choice vragen.<br />
Een vraag of de feedback bevat een fout of het juiste antwoord staat<br />
niet juist ingesteld. Omdat de vraag niet verwijderd kan worden als de<br />
toets loopt kan dit worden opgelost door de betreffende vraag op te<br />
zoeken (in de vragenpool of in de toets zelf) en vervolgens de vraag<br />
aan te passen. Vervolgens kunnen de studenten die de vraag op dat<br />
moment al hebben gemaakt, én deze fout hebben beantwoord, toch de<br />
punten toegekend krijgen. Punten kunnen worden toegekend door in<br />
het gradecentre de testresultaten <strong>van</strong> een individuele student op te<br />
vragen. Vervolgens kan per vraag het aantal punten worden aangepast<br />
dat de student heeft ont<strong>van</strong>gen.<br />
2.2 Het gradecenter<br />
2.2.1 Icoon:<br />
Studenten moeten een toets zelf op tijd submitten. Blackboard sluit de toets<br />
niet zelf af als de ingestelde tijd verstreken is. Dit kan tot gevolg hebben dat<br />
een toets te laat in wordt geleverd. Zorg dus voor een duidelijke instructie<br />
over het submitten <strong>van</strong> de toets.<br />
Als een student de toets niet binnen de aangegeven tijd heeft afgerond, dan<br />
verschijnt het groene icoontje met een uitroepteken in het gradecentre bij de<br />
betreffende student en gemaakte toets. Soms is dit icoontje terecht, zoals in<br />
situaties waar studenten echt minuten langer over de toets doen; maar het kan<br />
ook onterecht worden weergegeven, wat veroorzaakt wordt door een<br />
beperking <strong>van</strong> Blackboard. Als studenten enkele seconden voor de deadline<br />
de toets submitten, dan laat blackboard in de meeste gevallen dit symbool<br />
zien in het gradecentre, terwijl de studenten gewoon op tijd de toets hebben<br />
gesubmit. Blackboard heeft namelijk tijd nodig om het submitten te<br />
verwerken, waardoor altijd een aantal seconden wordt opgeteld (hoe groter<br />
de toets hoe meer seconden) bij de totale duur <strong>van</strong> de gemaakte toets.<br />
Indien de student terecht het icoontje in het gradecentre heeft gekregen, dan<br />
kan dit gewoon blijven staan en zal blackboard een score <strong>van</strong> 0 rekenen voor<br />
de betreffende toets. Indien de student onterecht het icoontje in het<br />
gradecentre heeft, dan kan dit simpelweg verwijderd worden door erop te<br />
klikken en vervolgens op enter te drukken. Nu verschijnt de juiste score <strong>van</strong><br />
de student in het gradecentre. In sommige gevallen verwerkt blackboard de<br />
enter niet goed en moet de handeling nog een paar keer worden herhaald.<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—20/30
Studenten met een dyslexie-verklaring kunnen toestemming krijgen om<br />
langer over de toetsen te doen. Dat betekent dat ze de toets standaard te laat<br />
submitten. Na iedere toets wordt het groene uitroepteken verwijderd voor alle<br />
dyslectici.<br />
2.2.2 Icoon:<br />
Als een student bezig is met de toets of deze niet goed heeft gesubmit<br />
verschijnt er een icoontje <strong>van</strong> een schriftje met pen in het gradecentre.<br />
Het niet goed afronden <strong>van</strong> de toets kan meerdere oorzaken hebben. In veel<br />
gevallen is de student op het moment <strong>van</strong> submitten niet meer ingelogd<br />
volgens blackboard. Dit zou veroorzaakt kunnen worden doordat<br />
bijvoorbeeld het internet tijdelijk uitvalt. Een andere oorzaak <strong>van</strong> het niet<br />
correct submitten <strong>van</strong> de toets is alleen <strong>van</strong> toepassing als de optie ‘forced<br />
completion’ is aangevinkt bij de ‘test options’. In dit geval wordt de student<br />
gedwongen de toets in één keer af te ronden. Op het moment dat de student<br />
per ongeluk de browser afsluit, is het niet meer mogelijk om opnieuw in te<br />
loggen en wordt de toets als niet gesubmit beschouwd.<br />
Als studenten tijdens het maken <strong>van</strong> de toets ieder antwoord afzonderlijk<br />
opslaan door op ‘save answer’ te klikken, dan blijven de gegeven antwoorden<br />
zichtbaar in blackboard. Indien studenten antwoorden niet hebben<br />
opgeslagen, dan leidt het niet correct submitten <strong>van</strong> de toets tot het verliezen<br />
<strong>van</strong> alle gegeven antwoorden. In het eerste geval kan het probleem eenvoudig<br />
worden opgelost, in het tweede wordt het lastiger.<br />
Als de student de antwoorden heeft opgeslagen dan kan in het gradecentre<br />
naast het icoontje worden geklikt op ‘view attempt … ‘. In dit scherm wordt<br />
vervolgens ‘test information’ geselecteerd en er verschijnt een knop met<br />
‘submit attempt’. Nu wordt de toets <strong>van</strong> de student correct gesubmit en<br />
wordt het juiste resultaat zichtbaar in het gradecentre.<br />
Indien de student de antwoorden niet heeft opgeslagen, of dat wel heeft<br />
gedaan maar nog niet alle antwoorden had gegeven, zit er niets anders op<br />
dan de student een herkansing aan te bieden voor de betreffende toets. Om<br />
dit te doen moet eerst weer in het gradecentre via ‘view attempt … ‘ naar ‘test<br />
information’ worden gegaan, om daar vervolgens te kiezen voor ‘remove<br />
attempt’. Nu kan de student de toets opnieuw maken. Indien de deadline <strong>van</strong><br />
de toets al is verstreken kan een ‘adaptive release’ voor de student worden<br />
ingesteld (zie § 2.3.2).<br />
2.3 Herkansing instellen<br />
In sommige situaties zal een student toestemming worden verleend om een<br />
toets <strong>van</strong> het <strong>digitaal</strong> <strong>werkboek</strong> te herkansen. Het kan zijn dat studenten door<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—21/30
overmacht een toets niet kunnen maken. Als het hierbij gaat om persoonlijke<br />
omstandigheden hanteren wij de regel dat de student dit voor de deadline<br />
moet aangeven en dat de overmachtsituatie geldt voor de gehele toetsperiode<br />
(studenten hebben namelijk 2 dagen de tijd om de toets te maken). In het<br />
geval <strong>van</strong> technische storingen hanteren wij de regel dat studenten zelf<br />
verantwoordelijk zijn voor een werkende computer met werkend internet. De<br />
UvA biedt daarnaast genoeg computers met stabiele internetverbinding.<br />
Alleen in het geval <strong>van</strong> Blackboard storingen of een storing op een UvAcomputer<br />
wordt een herkansing gegeven. Begin 2010-2011 hadden wij minder<br />
strenge regels en stond in de instructie dat in het geval <strong>van</strong> een technisch<br />
probleem zoals een computercrash een herkansing mogelijk was. Onze<br />
ervaring was dat het regende met mails over gecrashte computers,<br />
internetverbindingen, gecrashte muizen en toetsenborden. Nu horen wij daar<br />
zelden meer iets <strong>van</strong>.<br />
2.3.1 Een herkansing geven voordat de deadline sluit.<br />
Wanneer er sprake is <strong>van</strong> een storing tijdens een toets kan een nieuwe kans<br />
gegeven worden door de toetspoging te verwijderen middels “clear attempt”.<br />
De handigste manier om dit te doen is als volgt. Klik in het Grade Centre op<br />
View Grade Details (zie Figuur 2.1)<br />
Figuur 2.1 View grade details<br />
Vervolgens klik je op View attempt en krijg je de toets met de eventuele<br />
antwoorden <strong>van</strong> de student in beeld. Bovenin beeld klik je op Test<br />
Information. Vervolgens verschijnt de testinformatie <strong>van</strong> de betreffende<br />
student (zie Figuur 2.2) Hier kies je voor “Clear Attempt” om de poging te<br />
verwijderen, zodat de student opnieuw de toets kan maken (mits de deadline<br />
nog niet voorbij is), of voor “Submit Attempt” om de toets met antwoorden<br />
namens de student in te leveren, wanneer die bewaard zijn.<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—22/30
Figuur 2.2 Test informatie<br />
2.3.2 Adaptive Release instellen<br />
Als de deadline <strong>van</strong> een toets is verstreken en er moet een herkansing voor<br />
een student worden ingesteld, dan kan dit worden gedaan met behulp <strong>van</strong><br />
een adaptive release. Een adaptive release is een functie waarmee een<br />
onderdeel op blackboard beschikbaar kan worden gesteld aan een selectie<br />
studenten. Het is overigens <strong>van</strong> belang dat er geen andere weergaverestricties<br />
actief zijn op het betreffende onderdeel. Stel dat staat ingesteld dat een<br />
onderdeel wordt weergegeven <strong>van</strong> 1 mei tot 1 juni, en op 10 juni wil een<br />
student een toets herkansen, dan moet eerst de weergaverestrictie <strong>van</strong> 1 mei<br />
tot 1 juni worden uitgezet, voordat de adaptieve release effect kan hebben.<br />
Een adaptive release kan worden ingesteld door bij het gewenste onderdeel<br />
op de twee pijltjes rechts er<strong>van</strong> te klikken en vervolgens te kiezen voor<br />
“Adaptive Release”. Er verschijnt een scherm waar allereerst de data kunnen<br />
worden ingesteld waarbinnen het onderdeel beschikbaar moet zijn.<br />
Daarna kan worden aangegeven voor welke studenten dit onderdeel<br />
beschikbaar moet zijn. Studenten kunnen individueel worden toegevoegd op<br />
basis <strong>van</strong> hun studentnummer. Als het om grote aantallen studenten gaat is<br />
het handiger om een groep aan te maken met daarin de betreffende studenten<br />
en vervolgens deze groep te selecteren bij het instellen <strong>van</strong> de adaptieve<br />
release (zie § 2.3.4).<br />
2.3.3 Adaptive Release checken<br />
Je kunt een groep of een individuele student opnieuw toegang geven tot een<br />
toets met Adaptive Release. Het is niet altijd duidelijk of een student ook echt<br />
toegang heeft tot een toets die je voor haar geopend hebt. Dit kun je altijd<br />
checken door op de dubbele pijltjes naast een folder te klikken, en vervolgens<br />
op User Progress te klikken (zie Figuur 2.3). Hier zie je vervolgens aan het<br />
icoontje, onder visibility, of een bepaalde student inderdaad de folder kan<br />
zien.<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—23/30
Figuur 2.3 User progress<br />
2.3.4 Adaptive release voor grote groepen<br />
Soms komt het voor dat een grote groep studenten een herkansing krijgt voor<br />
een toets, en het daardoor erg lang gaat duren om al deze studenten één voor<br />
één handmatig een adaptive release te geven. Dit probleem kan sneller<br />
worden opgelost door de betreffende studenten op de blackboard pagina lid<br />
te maken <strong>van</strong> een groep en vervolgens de adaptive release voor alle leden <strong>van</strong><br />
die groep in te stellen. Hiervoor moet eerst in Excel een bestand worden<br />
gemaakt met daarin drie kolommen (zie Figuur 2.4). In kolom B staan de<br />
studentnummers <strong>van</strong> alle studenten die je aan de groep op blackboard wilt<br />
toewijzen. In kolom A staat voor ieder <strong>van</strong> die studenten steeds dezelfde<br />
cursuscode (het gaat immers om maar één vak), en in kolom C staat voor<br />
ieder <strong>van</strong> de studenten de naam <strong>van</strong> de groep waar ze aan moeten worden<br />
toegewezen (deze groep hoeft nog niet te bestaan). Vervolgens wordt dit<br />
bestand opgeslagen als Comma separated file (.csv).<br />
Figuur 2.4 Excelbestand voor het instellen <strong>van</strong> een adaptive release voor groepen<br />
Dit bestand kan op de blackboard pagina <strong>van</strong> de betreffende cursus worden<br />
geupload (Course management -> Course tools -> Group batch enroll).<br />
Vervolgens kan, zoals in Figuur 2.5 te zien is, een adaptive release worden<br />
ingesteld voor de groep door naar de betreffende opdracht te gaan en op de<br />
twee pijltjes naar beneden te klikken en vervolgens op ‘adaptive release’.<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—24/30
Figuur 2.5 Instellen adaptive release<br />
Figuur 2.6 Selecteren <strong>van</strong> een groep studenten voor een adaptive release<br />
Ten slotte kan de betreffende groep worden verschoven <strong>van</strong> de linker- naar<br />
de rechterkolom (zie Figuur 2.6), en rechtsboven (of onder) op submit worden<br />
geklikt.<br />
Het is ook mogelijk om puur <strong>van</strong>uit blackboard een adaptive release voor een<br />
groep studenten in te stellen, zonder dat gebruik hoeft te worden gemaakt<br />
<strong>van</strong> Excel. Dit gaat op dezelfde manier als hierboven beschreven, alleen moet<br />
de groep direct in blackboard worden aangemaakt in plaats <strong>van</strong> in Excel<br />
(Course management -> Users and Groups -> Groups). Vervolgens moet<br />
worden gekozen voor ‘’create single group’’ en daarna ‘’manual enroll’’ (zie<br />
Figuur 2.7).<br />
Figuur 2.7 Groep aanmaken in blackboard<br />
Er verschijnt een scherm waar informatie over de groep kan worden ingesteld<br />
en ten slotte kan onderin worden aangegeven welke gebruikers lid moeten<br />
worden <strong>van</strong> de groep (zie Figuur 2.8)<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—25/30
Figuur 2.8 Instellen groepslidmaatschap<br />
2.4 Problemen met Maple T.A.<br />
In het jaar 2010-2011 zijn voor het vak Onderzoeksmethoden & Statistiek<br />
oefeningen en toetsen via Maple T.A. aanboden. We liepen echter tegen een<br />
aantal technische problemen of onhandigheden aan, waardoor we dit jaar<br />
hebben gekozen voor andere oefeningen en toetsen. Waar wij tegenaan liepen<br />
was dat het gradebook <strong>van</strong> Maple T.A. en het gradecentre <strong>van</strong> Bb niet goed<br />
synchroniseerden. Dit was vooral het geval bij herkansingen of aanpassingen<br />
in scores nadat een toets gemaakt was. Daarnaast moet er zeer nauwkeurig<br />
geantwoord worden door een student (punten, komma’s, decimalen, open<br />
vragen) waardoor vaak door een punt/komma verwisseling al scoreverlies<br />
was. Aangezien de toetsen meetelden voor een cijfer gaf dit veel<br />
ontevredenheid bij studenten en correctiewerk voor medewerkers. Zodra<br />
Maple T.A. alleen gebruikt wordt om te oefenen vervalt dit probleem en biedt<br />
het systeem vele voordelen.<br />
In het geval dat Maple T.A. binnen Bb gebruikt wordt volgen hieronder<br />
instructies om een herkansing in te stellen of een cijfer aan te passen.<br />
2.4.1 Een herkansing instellen<br />
Wanneer een student herkansing mag krijgen, gaan we eerst naar<br />
/Course Tools<br />
/Maple T.A. Instructor Menu<br />
We komen nu in het Maple T.A. menu. We klikken linksboven op Actions, en<br />
selecteren dan Proctor Tools. Het zoekscherm werkt niet helemaal lekker. Het<br />
beste kunnen we zoeken op (zie Figuur 2.9).<br />
Achternaam<br />
met Exact als Match<br />
Unfiltered als Authorization Mode<br />
Assignment filter moet leeg zijn<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—26/30
Figuur 2.9 Student zoeken in Maple T.A.<br />
We klikken nu op Search, en vervolgens klikken we op het vinkje voor de<br />
student die een nieuwe poging mag. Bij permission vullen we in “Start and<br />
Grade” en in de dropdownlist kiezen we de toets waar het om gaat.<br />
Vervolgens klikken we op Authorize (zie Figuur 2.10).<br />
Figuur 2.10 Instellen herkansing in Maple T.A.<br />
Hiermee heeft de student binnen Maple T.A. een herkansing gekregen. In<br />
Blackboard moet je vervolgens in het Grade Centre het cijfer verwijderen,<br />
door Clear Grade te kiezen. (Wanneer je dit niet doet, en de student krijgt een<br />
nieuwe kans, dan wordt het cijfer niet door het nieuwe cijfer overschreven.)<br />
Aan studenten wordt de volgende instructie gemaild:<br />
Klik op Request Exception. Vervolgens op Remotely Authorized. Als het goed<br />
is kan de toets nu opnieuw gemaakt worden.<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—27/30
2.4.2 Cijfers corrigeren<br />
Het kan voorkomen dat een vraag een fout bevat of het automatisch nakijken<br />
niet naar wens is verlopen. Een docent kan dan beslissen om een gemaakte<br />
vraag alsnog goed te keuren. Dit werkt als volgt.<br />
Om de antwoorden <strong>van</strong> studenten te bekijken gaan we naar het Maple T.A. in<br />
Instructor Menu. Daar selecteer je de toets, en klikt vervolgens op submit. Je<br />
kunt nu een student aanklikken. Wanneer je onderaan op Details… klikt, kun<br />
je de eigenlijke antwoorden <strong>van</strong> de student zien. Naast de antwoorden<br />
kunnen de scores handmatig aangepast worden. Klik op opslaan of update.<br />
Het gradebook <strong>van</strong> Maple T.A. heeft nu een aangepaste score geregistreerd.<br />
Deze score wordt echter niet automatisch door het gradecentre <strong>van</strong> Bb<br />
overgenomen. In het gradecentre moet dus alsnog het nieuwe cijfer ingevoerd<br />
worden. Pas dan ziet de student via my grades de aangepaste score.<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—28/30
3. Contactinformatie<br />
Dit document is samengesteld door medewerkers <strong>van</strong> de ICTO afdeling<br />
Psychologie aan de <strong>Universiteit</strong> <strong>van</strong> <strong>Amsterdam</strong>. Voor vragen en/of<br />
suggesties voor uitbreidmogelijkheden kunt u contact opnemen met<br />
onderstaande medewerkers:<br />
Maartje Prevosth<br />
Coördinator Digitaal Werkboek<br />
Tel: 0205256912<br />
E-mail: M.M.Prevosth@uva.nl<br />
Paul Lodder<br />
Student-assistent ICTO<br />
Tel: 0205256907<br />
E-mail: P.lodder@uva.nl<br />
Blackboard Psychologie<br />
E-mail: psy-blackboard-fmg@uva.nl<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—29/30
Appendix<br />
Checklist <strong>digitaal</strong> <strong>werkboek</strong><br />
Voorafgaand aan een oefening en/of toets:.<br />
• Controleer tekst en ingestelde data/tijden waarop de oefening<br />
en/of toets beschikbaar zou moeten zijn<br />
• Controleer de vragenpools (juiste weergave en antwoord <strong>van</strong> de<br />
vragen)<br />
• Controleer de toetsinstellingen (bijvoorbeeld: force completion uit,<br />
timer aan)<br />
• Controleer de inhoud <strong>van</strong> de toets (correct aantal vragen, vragen<br />
horen bij te bestuderen stof)<br />
• Controleer gradecentre (kolom zichtbaar, possible points correct,<br />
due dates eruit, juiste weergave cijfer/score etc)<br />
• Controleer gradecentre onder studentaccount<br />
• Test de oefening en toets onder studentaccount (test accounts<br />
kunnen worden aangemaakt door de ICT medewerkers)<br />
Check?<br />
……….<br />
……….<br />
……….<br />
……….<br />
……….<br />
……….<br />
……….<br />
Versie 1.1, december 2011<br />
ICTO Psychologie—30/30