24<strong>Les</strong> QCM conv<strong>en</strong>tionnels ne sont toutefois plus les seuls outils d‟évaluation qui peuv<strong>en</strong>t êtrecomplètem<strong>en</strong>t informatisés <strong>et</strong> mis sur Intern<strong>et</strong>. De plus <strong>en</strong> plus <strong>de</strong> logiciels perm<strong>et</strong>t<strong>en</strong>t <strong>de</strong> construirediverses formes <strong>de</strong> simulations <strong>et</strong> d‟<strong>en</strong> faire égalem<strong>en</strong>t <strong>de</strong>s outils d‟évaluation automatisés. Par ailleurs,un même outil <strong>de</strong> questionnaire ou <strong>de</strong> scénario <strong>en</strong>tièrem<strong>en</strong>t informatisé <strong>et</strong> disponible <strong>en</strong> <strong>ligne</strong> peut nonseulem<strong>en</strong>t être utilisé à plusieurs fins, mais aussi administré <strong>de</strong> différ<strong>en</strong>tes façons. Au choix <strong>de</strong>l‟<strong>en</strong>seignant ou <strong>de</strong> l‟organisation, généralem<strong>en</strong>t <strong>en</strong> fonction <strong>de</strong> la portée <strong>de</strong> l‟évaluation, l‟épreuve seraparfois effectuée sur campus, souv<strong>en</strong>t à distance dans <strong>de</strong>s c<strong>en</strong>tres <strong>de</strong> tests, sous surveillance à un<strong>en</strong>droit conv<strong>en</strong>u <strong>en</strong>tre l‟étudiant <strong>et</strong> son formateur ou complètem<strong>en</strong>t sur le Web. <strong>Les</strong> évaluations<strong>en</strong>tièrem<strong>en</strong>t <strong>en</strong> <strong>ligne</strong> dont trait<strong>en</strong>t les pages qui suiv<strong>en</strong>t ne sont donc pas toujours complètem<strong>en</strong>t àdistance – bi<strong>en</strong> qu‟elles puiss<strong>en</strong>t toutes l‟être–, <strong>et</strong> elles ne se prés<strong>en</strong>t<strong>en</strong>t pas toujours sous la formed‟interrogations.<strong>Les</strong> <strong>de</strong>ux sections qui suiv<strong>en</strong>t examin<strong>en</strong>t, pour chacun <strong>de</strong>s <strong>de</strong>ux grands types d‟évaluations <strong>en</strong>tièrem<strong>en</strong>tautomatisées employées actuellem<strong>en</strong>t, soit les questionnaires <strong>et</strong> les simulations, les gran<strong>de</strong>s catégoriesd‟usages <strong>et</strong> <strong>de</strong>s exemples les illustrant.2,11 <strong>Les</strong> questionnaires automatisésSi les évaluations <strong>en</strong>tièrem<strong>en</strong>t <strong>en</strong> <strong>ligne</strong> ne se limit<strong>en</strong>t pas aux questionnaires, ceux-ci ne sont pas nonplus circonscrits aux QCM. Par ailleurs, les fonctionnalités que l‟informatisation ajoute à ces outils <strong>en</strong> font<strong>de</strong>s formes d‟évaluation substantiellem<strong>en</strong>t différ<strong>en</strong>tes <strong>de</strong>s tests <strong>et</strong> exam<strong>en</strong>s traditionnels.L‟acronyme QCM est <strong>en</strong> fait utilisé pour <strong>de</strong>squestionnaires divers. <strong>Les</strong> réponses peuv<strong>en</strong>teffectivem<strong>en</strong>t être à choix multiples (avec réponseunique ou non), binaires (vrai/faux, oui/non, <strong>et</strong>c.) ouunique, pr<strong>en</strong>dre la forme <strong>de</strong> réponses à classer, àassocier, à exclure, à placer sur une image, d‟unmouvem<strong>en</strong>t à effectuer, d‟échelles, <strong>de</strong> grilles <strong>et</strong> <strong>de</strong>mots-croisés, <strong>de</strong> dictées, <strong>de</strong> brèves réponsesouvertes, <strong>et</strong>c. La gamme <strong>de</strong> réponses perm<strong>et</strong>tantune correction automatique est donc déjà vaste <strong>et</strong>les progrès <strong>de</strong> l‟analyse du texte <strong>et</strong> <strong>de</strong> la parole prom<strong>et</strong>t<strong>en</strong>t <strong>de</strong> l‟ét<strong>en</strong>dre davantage.Des ressources sur les exerciseursConstruire un exerciseur pour l‟appr<strong>en</strong>tissage, undossier <strong>de</strong> Prof<strong>et</strong>ic, bi<strong>en</strong> qu‟il date <strong>de</strong> 2005, <strong>de</strong>meureun gui<strong>de</strong> à consulter.TICE <strong>et</strong> QCM, un dossier thématique du GRECO(2004) propose à la fois une métho<strong>de</strong> pédagogiqued‟élaboration <strong>de</strong> ce type d‟exercice <strong>et</strong> une comparaison<strong>de</strong>s fonctionnalités <strong>de</strong> neuf logiciels.<strong>Les</strong> questions pr<strong>en</strong>n<strong>en</strong>t aussi <strong>de</strong> multiples formes. Il peut s‟agir d‟une question à trous, mais égalem<strong>en</strong>td‟une formule mathématique, d‟un énoncé ou d‟un texte long, d‟une image ou d‟un graphique <strong>et</strong>, <strong>de</strong> plus<strong>en</strong> plus couramm<strong>en</strong>t, d‟une animation, d‟un fichier sonore ou d‟une vidéo. Ces diverses formes perm<strong>et</strong>t<strong>en</strong>tnotamm<strong>en</strong>t d‟<strong>en</strong> faire <strong>de</strong>s mises <strong>en</strong> situation (jeux <strong>de</strong> rôle, simulation, <strong>et</strong>c.), <strong>de</strong>s analyses <strong>de</strong> texte ou <strong>de</strong>sétu<strong>de</strong>s <strong>de</strong> cas.Ces divers tests, lorsqu‟informatisés, vont bi<strong>en</strong> au-<strong>de</strong>là <strong>de</strong> la seule compilation <strong>de</strong>s réponses correctes. Ilspeuv<strong>en</strong>t être dynamisés <strong>de</strong> diverses façons <strong>et</strong> adaptés à la progression <strong>de</strong> l‟étudiant. Par exemple, lecont<strong>en</strong>u peut être conçu pour:• donner une rétroaction simple (bonne ou mauvaise réponse) ou approfondie (explications,référ<strong>en</strong>ces, <strong>et</strong>c.);• à chacune <strong>de</strong>s réponses ou seulem<strong>en</strong>t à la réponse exacte;• générer les questions <strong>en</strong> fonction <strong>de</strong> la ou <strong>de</strong>s réponses précé<strong>de</strong>ntes;• proposer <strong>de</strong>s sous-questions <strong>en</strong> fonction <strong>de</strong> la réponse originale;• donner <strong>de</strong>s conseils ou suggestions <strong>en</strong> cours <strong>de</strong> déroulem<strong>en</strong>t, sur <strong>de</strong>man<strong>de</strong> ou <strong>en</strong> fonction <strong>de</strong> laréponse donnée;• formuler les questions ou les réponses sous forme d‟illustrations à manipuler, d‟animations, <strong>de</strong>fichiers audio ou vidéo.Ces fonctionnalités peuv<strong>en</strong>t être combinées <strong>de</strong> diverses façons pour sout<strong>en</strong>ir l‟appr<strong>en</strong>tissage <strong>et</strong>s‟approcher d‟un tutorat individualisé.REFAD Pratiques <strong>et</strong> <strong>défis</strong> <strong>de</strong> l’évaluation <strong>en</strong> <strong>ligne</strong> 2011
25L‟<strong>en</strong>seignant peut <strong>en</strong> adapter l‟administration à ses objectifs, particulièrem<strong>en</strong>t <strong>en</strong> terme <strong>de</strong> niveau <strong>de</strong>sécurité visé, <strong>en</strong>tres autres :puiser <strong>de</strong> façon aléatoire dans <strong>de</strong>s banques <strong>de</strong> questions;intervertir les réponses;perm<strong>et</strong>tre ou non un nouvel essai <strong>de</strong> réponse <strong>et</strong> octroyer <strong>de</strong>s notes distinctes <strong>en</strong> fonction dunombre <strong>de</strong> t<strong>en</strong>tatives faites;définir précisém<strong>en</strong>t le mom<strong>en</strong>t du test ou le r<strong>en</strong>dre disponible <strong>en</strong> tout temps;limiter le temps alloué à chaque question ou à toute l‟épreuve;le r<strong>en</strong>dre conditionnel à un appr<strong>en</strong>tissage ou à un test préalable;montrer une seule question à la fois ou plusieurs;afficher les résultats <strong>et</strong> les rétroactions immédiatem<strong>en</strong>t ou au mom<strong>en</strong>t <strong>de</strong> son choix.Il peut égalem<strong>en</strong>t, par exemple :utiliser plus facilem<strong>en</strong>t <strong>de</strong>s barèmes <strong>de</strong> notation complexes (correction négative, pondération,<strong>et</strong>c.);obt<strong>en</strong>ir <strong>de</strong>s analyses détaillées <strong>de</strong>s résultats comme du déroulem<strong>en</strong>t <strong>de</strong>s exercices.Le cas suivant illustre certaines <strong>de</strong> ces fonctionnalités <strong>et</strong> <strong>de</strong> ces usages.Des tests à l’Op<strong>en</strong> UniversityL‟Op<strong>en</strong> University (OU) est une pionnière <strong>en</strong> FAD. Elle opère aussi dans un contexte national qui a fait <strong>de</strong>l‟évaluation électronique une priorité. Elle a donc participé à plusieurs proj<strong>et</strong>s liés à l‟évaluation à distance,dont le développem<strong>en</strong>t d‟un logiciel <strong>de</strong> tests <strong>en</strong> réseau, Op<strong>en</strong>Mark.Le développem<strong>en</strong>t d’Op<strong>en</strong>MarkOp<strong>en</strong>Mark est un système d‟évaluation adaptatif fonctionnant sous Moodle. Il intègre égalem<strong>en</strong>t, sous unemême interface, le module <strong>de</strong> jeu-questionnaire <strong>de</strong> Moodle ainsi que <strong>de</strong>s élém<strong>en</strong>ts d‟un systèmepropriétaire, Intellig<strong>en</strong>t Assessm<strong>en</strong>t, qui perm<strong>et</strong> l‟évaluation automatisée <strong>de</strong> brefs textes (Sclater, 2008). Onpeut y intégrer <strong>de</strong>s questions prov<strong>en</strong>ant <strong>de</strong> Moodle Quiz <strong>et</strong> d‟autres logiciels utilisés au sein <strong>de</strong>l‟établissem<strong>en</strong>t <strong>et</strong> exporter les résultats à Moodle Gra<strong>de</strong>book. Le système intègre <strong>de</strong>s capacitésmultimédias, afin <strong>de</strong> créer <strong>de</strong>s évaluations stimulantes. Il est utilisable <strong>en</strong> tout lieu <strong>et</strong> <strong>en</strong> tout temps : lesétudiants peuv<strong>en</strong>t comm<strong>en</strong>cer un test au mom<strong>en</strong>t souhaité, l‟interrompre <strong>et</strong> le repr<strong>en</strong>dre du mêmeordinateur ou d‟un autre point d‟accès Intern<strong>et</strong>.Le développem<strong>en</strong>t s‟inscrivait dans un <strong>en</strong>semble <strong>de</strong> 11 proj<strong>et</strong>s,auxquels une somme <strong>de</strong> 5 millions <strong>de</strong> livres a été consacrée<strong>en</strong>tre 2005 <strong>et</strong> 2008. Auparavant, l‟OU utilisait déjà certainslogiciels d‟évaluation électronique, dont QuestionMarkPerception, <strong>et</strong> employait <strong>de</strong>s exam<strong>en</strong>s sur papier corrigés parordinateurs <strong>de</strong>puis les années 1970. Elle avait donc déjà réalisé<strong>de</strong>s millions <strong>de</strong> tests.Son fonctionnem<strong>en</strong>tDurant un exam<strong>en</strong>, Op<strong>en</strong>Mark vérifie si une réponse est juste ounon <strong>et</strong> donne une rétroaction immédiate ou différée, au choix <strong>de</strong>l‟<strong>en</strong>seignant, <strong>en</strong> affichant à la fois la question <strong>et</strong> la réponse. Ilaugm<strong>en</strong>te le niveau <strong>de</strong> rétroaction avec chaque réponse fautive,diminue généralem<strong>en</strong>t la note accordée <strong>en</strong> fonction du nombre<strong>de</strong> t<strong>en</strong>tatives <strong>et</strong> dirige au besoin l‟étudiant vers les élém<strong>en</strong>tsFigure 3: Un exemple <strong>de</strong> test sousOp<strong>en</strong>Mark 76<strong>Les</strong> formations du Op<strong>en</strong>Learn LabSpace<strong>de</strong> l‟OU inclu<strong>en</strong>t une formation sur: ”OUeAssessm<strong>en</strong>t.pertin<strong>en</strong>ts du matériel du cours (JISC, 2010). Il <strong>en</strong>voie aussi une confirmation par courriel <strong>de</strong> la soumissiond‟une évaluation sommative.Comme l‟indique l‟étu<strong>de</strong> <strong>de</strong> cas “Designing interactive assessm<strong>en</strong>ts to promote in<strong>de</strong>p<strong>en</strong><strong>de</strong>nt learning” quilui est consacrée, l‟objectif du système est d‟abord <strong>de</strong> favoriser l‟autonomie dans l‟appr<strong>en</strong>tissage. L‟acc<strong>en</strong>test spécialem<strong>en</strong>t mis sur la rétroaction ciblée <strong>et</strong> sur l‟immédiat<strong>et</strong>é <strong>de</strong> celle-ci, qui perm<strong>et</strong> à l‟étudiant d‟agirsur le champ. C<strong>et</strong>te rétroaction est <strong>en</strong> eff<strong>et</strong> jugée ess<strong>en</strong>tielle à un appr<strong>en</strong>tissage réussi.REFAD Pratiques <strong>et</strong> <strong>défis</strong> <strong>de</strong> l’évaluation <strong>en</strong> <strong>ligne</strong> 2011
- Page 1 and 2: Les pratiques et défis de l’éva
- Page 3 and 4: TABLE DES MATIÈRESSommaire .......
- Page 6 and 7: IntroductionAssessment is central t
- Page 8 and 9: Chapitre 1.Des facteurs de dévelop
- Page 10 and 11: 10comme ailleurs, on fait un consta
- Page 12 and 13: 12Des évaluations variéesRegardle
- Page 14 and 15: 141,26 La fréquence de la mesureRa
- Page 16 and 17: 161,3 Vers un alignementA good teac
- Page 18 and 19: 18Une histoire, quatre perspectives
- Page 20 and 21: 20de la recherche sous-jacente d‟
- Page 22 and 23: Chapitre 2.Des pratiques et modèle
- Page 26 and 27: 26Son utilisationJusqu‟au début
- Page 28 and 29: 28réordonner les questions et les
- Page 30 and 31: 30Dans de grands groupesL‟usage d
- Page 32 and 33: 32En ce qui a trait à l‟étudian
- Page 34 and 35: 34simulations. En effet, on peut al
- Page 36 and 37: 36le tuteur. Les nombreux outils ma
- Page 38 and 39: 382,22 Les cyberportfoliosIl me sem
- Page 40 and 41: 40Le portfolio comme activité d’
- Page 42 and 43: 42L’Option du blogueSonia Blouin
- Page 44 and 45: 44Des sites de logiciels comme Zuna
- Page 46 and 47: 46handicapé, l‟impact du daltoni
- Page 48 and 49: 48éventuellement à lui construire
- Page 50 and 51: 50Les étudiants complètent chaque
- Page 52 and 53: 52madame Blouin pour cette recherch
- Page 54 and 55: 54Le plagiatLa Commission de l‟é
- Page 56 and 57: 56• Une faible minorité d‟appr
- Page 58 and 59: 58Des recherchesPlusieurs études o
- Page 60 and 61: 6057,2 % d’entre eux vont encore
- Page 62 and 63: 62relevait des taux de tricherie de
- Page 64 and 65: 64parmi le groupe le plus à risque
- Page 66 and 67: 66journaux étudiants, dans la docu
- Page 68 and 69: 68La formation à la rechercheIl se
- Page 70 and 71: 70• demander l’analyse ou la cr
- Page 72 and 73: 72De façon générale, on estime q
- Page 74 and 75:
74• Le climat de non-confiance au
- Page 76 and 77:
76Grijalva et autres (2006) font é
- Page 78 and 79:
78En résumé : Des exercices sur l
- Page 80 and 81:
80168 Bunn, D. N., Caudill, S. B. e
- Page 82 and 83:
Chapitre 4.Des avantages et d’aut
- Page 84 and 85:
84l‟ouvrage et de s‟assurer que
- Page 86 and 87:
86réussissaient mieux l‟examen f
- Page 88 and 89:
88styles d‟apprentissage et perso
- Page 90 and 91:
90En résumé : Des exercices sur l
- Page 92 and 93:
ConclusionThe issue for e-assessmen
- Page 94 and 95:
ANNEXE : Un inventaire de logiciels
- Page 96 and 97:
96mots à partir d’un fichier au
- Page 98 and 99:
98Respondussecondaire, liés à des
- Page 100 and 101:
100CMapToolsComputerisedassessment
- Page 102 and 103:
102CopyTrackerLogiciel libre de dé
- Page 104 and 105:
Bibliographie 1Cette bibliographie
- Page 106 and 107:
106system that tutors as it assesse
- Page 108 and 109:
108http://www.matimtl.ca/ePortfolio