Comment réaliser un QCM pour l`évaluation - Insa
Contents
1. Ordre alphab tique Ordre s quentiel Mais ceci n est qu titre indicatif puisqu il faut avant tout varier la position de la r ponse correcte Enfin il ne reste plus qu valider le QCM et v rifier sa fiabilit Un test sera valide selon sa capacit valuer les comp tences des tudiants et fiable selon sa capacit diff rencier les niveaux diff rents des tudiants Il existe des programmes informatiques qui calculent des statistiques pour chaque nonc ils permettent ainsi d analyser un QCM II 3 Pourquoi valuer par un QCM Avantages n Mesurer objectivement les connaissances d un candidat n Isoler un crit re de connaissance en vitant les al as d une r ponse r dig e n Evaluer diverses comp tences connaissance compr hension analyse synth se valuation z D tecter des difficult s et servir de base de travail n Automatiser la correction et ainsi gagner du temps de correction n Identifier des niveaux de difficult s au moyen des distracteurs n Etre enrichi lors de chaque preuve par l analyse des r ponses LOPNEMENRS n Le candidat peut r pondre au hasard n La r ponse est fournie dans l item Le QCM n value pas la r daction ou l expression d un candidat Au regard des avantages et des inconv nients le QCM semble tre la meilleure mani re d valuer T APPO II 4 Quels sont les diff rents types de QCM On disting2. EST CE QU UN QCM IL1 Lexique Un item Ensemble compos d un nonc et de ses options de r ponses Un nonc Une question ou amorce de r ponse Les alternatives ou les options Les r ponses propos es La r ponse correcte La bonne option Les distracteurs Les r ponses incorrectes mais vraisemblables prennent en compte les erreurs les plus fr quentes IL2 Principes de base d un QCM Dans cette seconde sous partie nous allons noncer les diff rents principes respecter Tout d abord pour formuler un bon questionnaire choix multiples il faut commencer par identifier les comp tences valuer Ensuite il est alors possible de r diger les objectifs Ces objectifs l permettent de mettre en valeur les connaissances importantes acqu rir Puis il est alors possible de choisir quel niveau de connaissance valuer On distingue 3 niveaux Niveau 1 Connaissance rappel ou reconnaissance Niveau 2 Application et compr hension Niveau 3 Analyse r solution de probl mes La majorit des QCM value le 1 niveau de ce sch ma Ensuite arrive la r daction m me du QCM Un test de type QCM doit valuer les connaissances des tudiants au lieu de leurs comp tences r pondre aux questions R gles g n rales Il faut r diger chaque item de fa on couvrir un objectif bien pr cis Les questions doivent tre claires et pr cises suffisantes et ind pendantes des
3. d ordre logique pour randomiser nos r ponses Enfin nous avons r dig des exercices corrig s d auto valuation regroupant toutes les notions savoir afin que les tudiants puissent juger eux m me de leurs connaissances avant de r pondre au QCM Conseil Bien s aider des guides de QCM avant de se lancer dans l laboration t te baiss e Bien suivre les principes de bases IV 2 Choix du bar me Nous avons opt pour un bar me par r ponse Le QCM tait compos de 20 questions chacune ayant une seule r ponse juste Not sur 20 nous attribuons un point chaque r ponse juste Pour ne pas inciter les l ves choisir des r ponses au hasard nous d cidons de faire un QCM point n gatif 0 5 points sont retir s dans le cas d une r ponse fausse Nous avons opt pour 0 5 et non 1 points afin de ne pas avoir une notation trop s v re Cette notation typique permet d une part aux tuteurs d valuer rapidement les acquis des l ves et d autre part aux tudiants de savoir o ils se situent apr s ces trois jours d APP IV 3 R sultats du QCM Pour avoir du changer un assez grand nombre de mails avec Mr Walter Escoffier enseignant l INSA la M canique du point en 1 ann e et modifi en cons quences les diff rents items du QCM nous pensions que les tudiants entrant INSA trouveraient ce test de connaissances assez difficile Cependant apr s avoir corrig toutes les copies la moyenne
4. obtenue par les tudiants tait de 12 avec un cart type de plus ou moins 3points Cette note est assez repr sentative des notes que nous avions obtenues en 1 ann e l INSA Nous avons demand aux l ves de 1 ann e quels taient leurs ressentis la suite de ce QCM Il est souvent ressorti que le QCM comportait trop de questions portant sur les d finitions et les r ponses taient parfois tr s subtiles Mais globalement l appr ciation du QCM tait bonne ni trop long ni trop dur V CONCLUSION L objectif de ce rapport est de r pondre la probl matique que nous nous somme pos Il nous permet finalement d valuer notre QCM et de rendre la t che moins difficile nos successeurs On y retrouve donc quelques conseils afin qu ils ne reproduisent pas les m me erreurs que nous avons faites D autre part cette exp rience de r alisation d un QCM nous a beaucoup apport Nous avons pu nous rendre compte de la complexit et la difficult de cr er un QCM et ce sur plusieurs points de vue Nous avons aussi r alis que le QCM peut tre un outil d valuation tr s puissant mais il reste peu exploit et r pandu dans l enseignement Cela est du des aprioris et un manque de connaissance autour de cet outil C est pourquoi lors de la rencontres p dagogie et formations d ing nieurs nous allons promouvoir et familiariser le monde de l enseignement au QCM R F RENCES Article dans l encyclo
5. r ponses des autres items Eviter les termes impr cis et absolus tels que parfois pourrait jamais aucun Et ne pas employer d abr viations sans clairement pr ciser leur signification Les consignes Il est important et essentiel de mentionner le bar me de notation d un QCM Ne pas oublier non plus de mentionner s il y a des questions bonus Pr ciser s il y a une ou plusieurs bonnes r ponses R daction de l nonc Un nonc peut tre un simple mot une phrase un sch ma ou une courte histoire pourvu que l l ve le comprenne d s la 1 lecture Les questions directes doivent tre privil gi es L nonc doit tre univoque simple pr cis et honn te R daction des options Outre les r ponses VRAT FAUX un QCM doit proposer 3 5 r ponses ni plus viter d embrouiller l l ve avec trop de subtilit s ni moins viter de faire un QCM trop facile Tout d abord il est conseill de commencer par r diger la r ponse correcte et de s assurer qu elle est incontestable Ensuite il faut r diger les distracteurs de la m me mani re que la bonne r ponse La r daction des distracteurs est la partie la plus difficile la vraisemblance des d clarations est alors tr s importante Rangement des r ponses Apr s avoir r dig les r ponses il faut les randomiser Il y a plusieurs mani res possibles de les classer Ordre num rique Ordre chronologique
6. sujet de 1 APPO pour pouvoir savoir exactement de quoi il s agit Le souci est qu on ne l a pas vraiment fait en entier seulement la toute premi re partie du probl me pos aux tudiants Le probl me tait compos de plusieurs missions aux difficult s croissantes Or en n ayant r solu uniquement la premi re mission nous n avons pas abord tous les calculs n cessaire la fabrication d une voiture r pondant un cahier des charges celui ci variant au cours de l avancement de l APP Ainsi l on a pu formuler seulement des hypoth ses sur ce qui serait acquis par chacun des tudiants durant l APPO Nous avons suppos les informations cherch s par les tudiants afin de r soudre certaines exigences Il en r sulterait des notions abord es ou m me acquises que nous avons l aussi suppos es On pouvait s appuyer sur le cours de restructuration auquel pouvaient assister les tudiants Cependant il n tait pas obligatoire et tait interactif c est dire qu on y trouver uniquement des r ponses des questions al atoires pos es par les l ves Finalement on ne pouvait pas vraiment tre s res de leurs connaissances la fin de I APPO Par ailleurs on a eu une autre difficult qui est de se rappeler nos acquis en sortant du lyc e C est dire que l on ne savait plus si telle notion avait t acquise durant le lyc e ou bien l INSA On a donc eu du mal cerner le niveau des tudiant
7. COMMENT REALISER UN QCM POUR L EVALUATION INDIVIDUELLE D UN APP EFSTATHIOU Emilie KARFAL Ghizlane 1 4 ann e G nie M canique Ing nierie Syst me INSA Toulouse 2 4 ann e G nie M canique Ing nierie Syst me INSA Toulouse R sum A Identifier les comp tences valuer en premier lieu permet de concevoir un bon QCM Celui ci rend possible une valuation simple rapide et pr cise Des probl mes de formulations ainsi que des contraintes de temps nous ont fait nous rendre compte de la difficult de cr er un QCM pour l valuation d un APP Finalement nous avons suivi les principes de base sans m me les conna tre Les r sultats furent satisfaisants Mots cl s QCM valuation bar mes distracteurs APP I INTRODUCTION Les QCM peuvent permettre d valuer des connaissances acquises au cours d un enseignement Lorsqu un QCM est bien formul il permet d valuer plusieurs niveaux de connaissance C est ainsi que nous allons vous exposer toutes les notions n cessaires la r alisation d un QCM sans d faut Tout au long de ce rapport nous commen ons par pr senter les principes de base les diff rents types de QCM et de bar mes de notation que l on peut trouver et l int r t d valuer cet APP par un QCM Ensuite nous d veloppons toutes les difficult s rencontr es au cours de la r alisation d un QCM dans le cadre de l APPO Enfin nous valuons notre QCM II QU
8. p die en ligne Wikip dia Derni re modification de la page le 17 novembre 2011 Questionnaires choix multiples M moire S Pouget 2010 QCM Mode d emploi DIU de p dagogie m dicale 2010
9. s que l on avait face nous tout cela afin de concevoir un QCM adapt Notre but principal tait de faire des questions accessibles un QCM ni trop difficile ni trop facile Et tant nous m me de simples tudiantes ce f t la premi re fois que nous nous trouvions face une telle situation Situation qui s est av r e complexe car le fait qu une question soit difficile ou facile est relatif Conseil Bien s approprier le sujet et les objectifs p dagogiques faire une bonne valuation des acquis du lyc e et de 1 APPO et demander conseil des professeurs IV EVALUATION DE NOTRE QCM IV 1 Avons nous suivi les principes de base Il est vrai que lorsque nous avons commenc laborer notre QCM nous ne nous sommes pas pench es sur les diff rents guides de r daction disponibles et consultables dans la litt rature Cependant sans en avoir pris conscience certains principes ont t suivis Nous avons commenc par identifier les objectifs de l APPO et r dig les notions et connaissances acqu rir la fin de l APPO Implicitement nous avons d cid d valuer le niveau 2 de connaissances voir la partie Principes de Base d un QCM savoir l application et la compr hension Ensuite nous avons r dig les items en nous aidant de divers exercices types d finitions supports de cours Le plus difficile tait bel et bien la r daction des distracteurs Cependant nous n avons pas utilis
10. ue 5 types de QCM diff rents QCM r ponse Vrai Faux Oui Non QCM r ponse simple unique QCM r ponses libres multiples QCM associations appariements QCM nonc illustr image sch ma fichier audio ou vid o PRATU Dn II 5 Quelles sont les diff rentes possibilit s de notation Conformit stricte Conformit stricte avec p nalit Conformit relative Conformit relative avec coefficient sur r ponse Bar me selon concordance des r ponses Bar me par r ponse M LA DIFFICULTE DE REALISER UNE EVALUTION ACCESSIBLE II 1 Les difficult s que nous avons rencontr es La premi re difficult f t que l on a du concevoir ce QCM durant la p riode d examen Ainsi on a eu du mal trouver des cr neaux de libres Ensuite au moment o nous pensions avoir termin le QCM on a omis qu il y aurait des corrections et donc des changes avec un professeur pour corriger et am liorer le QCM Ce qui nous a pos probl me car lors de la correction du QCM nous tions en vacance Donc finaliser le QCM en n tant pas sur le m me lieu pour pouvoir se rencontrer tait difficile La correspondance se faisant par mail les r ponses taient d cal es puis l acc s internet pour chacune de nous deux tait d licat Conseil R aliser le QCM durant la phase de conception de l APP IIL2 Les difficult s que nous avons eues faire un QCM Il a fallut que l on s approprie le
Download Pdf Manuals
Related Search