Guide pratique de l`évaluation (littérale)
Contents
1. traiter car le syst me pr voit une zone grise entre la r ussite et l chec Voici les trois niveaux qu il faut d partager Niveau de comp tence 2 exprim par les mentions A B ou C 13 seuil 60 Niveau d incertitude r ussite conditionnelle passable mention D seuil 50 Constat d chec mentions E ou F L utilisation de poids n gatifs E 1 et F 2 aurait aussi le m me effet 10M me obligatoire me souligne un coll gue 11Le paragraphe est inspir d un incident v cu au Certificat en Droit une tudiante avec 29 5 sur 30 l intra et 47 sur 70 au final pour une moyenne pond r e de 76 5 pensait se voir attribuer au moins un B ou un B selon l chelle elle re ut B Justification conversion de chaque preuve en lettre et utilisation des points pour la moyenne 12Le terme comp tence n est pas consacr mais il semble singuli rement bien appropri la situation 13A moins d avis contraire la mention d une lettre comme C comprend aussi ses sous cat gories C C et C Les seuils de l ancien r glement p dagogique expriment assez bien ces trois notions chec passage minimal et comp tence Le seuil de 50 traduit le fait que l tudiant devrait conna tre au moins la moiti de la mati re de chaque cours et se trouver plus pr s de la connaissance parfaite que de l ignorance totale Le 60 refl te le fait qu un dipl me doit attester d un niveau de m2. 9 quest 10 quest F 0 1 0 1 2 0 2 0 3 0 3 E 2 3 3 4 4 D 3 4 4 5 5 C 4 5 5 6 6 7 B 5 6 6 7 8 A 6 7 7 8 8 9 9 10 Avec moins de 6 r sultats possibles on utilisera encore moins de mentions Par exemple dans un de mes cours je donne une suite d exercices r aliser en laboratoire Pour chaque exercice il y a trois r sultats possibles R alis dans les temps correct mais en retard 1 semaine maximum et chec Pr sentement je donne 0 1 ou 2 points si j utilisais la notation litt rale je donnerais F D ou A En conclusion pour des preuves avec un nombre limit de r sultats possibles notez en points ou utilisez un petit nombre de lettres bas sur les quivalences de l chelle A 28 Annexe 2 Les bar mes avec seuils Je traite ici d une technique utile qui semble particuli re au D partement d informatique et RO Typiquement beaucoup de cours comprennent des travaux pratiques et des exercices qui servent l assimilation de la mati re Dans l valuation du cours doit on tenir compte de ces travaux ou est ce que l valuation doit se faire surtout sur la base d examens Le probl me avec les travaux pratiques c est qu ils sont peu discriminatoires Le but d un travail pratique c est de faire apprendre les travaux se font en quipe il n y a pas de limite de temps stricte ils sont con us pour tre r ussis il est donc difficile d y chouer D un certain cot on voudrait donner une forte pond ratio
3. 90 2 1 tudiant maximum 91 8 lci aussi 70 correspond bien une mesure de milieu 16 R sultats du programme MATH INFO Voici les r sultats pour tous les tudiants du programme 33 personnes y compris 2 checs 3co O 10 20 30 40 50 60 70 80 0 100 Moyennes Math info moyenne 68 6 m diane 68 3 r sultats gt 80 24 8 tudiants r sultats gt 85 6 2 tudiants r sultats gt 90 0 maximum 87 4 De l ensemble de ces r sultats je conclus que 70 semble tre un palier raisonnable en informatique et RO pour d partager la moiti des tudiants en dessus de la moyenne A et B de ceux en dessous de la moyenne C et D De m me utiliser 80 pour d limiter les B des A semble utile Environ 10 20 de nos dipl m s obtiendraient un A pour le BSc 17 Attribution de notes chelle A Bas sur toutes ces donn es je propose une premi re chelle qui est lin aire simple comprendre et appliquer et qui r compense nos meilleurs tudiants les A Mention Plage Note repr sentative20 A 90 100 95 A 80 90 85 B 70 80 75 C 60 70 65 D 50 60 55 E 40 50 45 F 0 40 0 Je recommande cette chelle pour l attribution directe de notes litt rales Il y a quelques ann es un de mes coll gues le professeur Paul Bratley proposait un bar me de correction pour nos projets de fin d tudes le co
4. bar mes avec seuils employ s au D partement d informatique et recherche op rationnelle 25 CONCLUSIONS Au d but j envisageais ce guide sous forme d un feuillet explicatif de 4 ou 5 pages mais apr s r flexion j ai t amen traiter le probl me de fa on plus globale et le texte s est allong Pour r sumer e Le guide souligne la diff rence entre la mesure et l valuation Notre ancien syst me de notation avec des pourcentages s apparentait la mesure tandis que la notation litt rale veut afficher le message essentiel de l valuation e On note plusieurs probl mes avec notre pratique actuelle de la notation litt rale l absence de normalisation l abus des chelles de conversion et l emploi de techniques vici es pour la combinaison de notes e Je vous propose de faire l valuation en deux tapes d abord en vous basant sur le crit re de comp tence d cidez s il y a r ussite not e par A B ou C ou chec not avec E ou F la mention D passable indique que vous n avez pas pu trancher en second lieu pour les tudiants qui ont r ussi octroyez les mentions selon le succ s relatif de telle sorte qu long terme la moiti re oivent des A et des B et l autre moiti des C et des D e Suite l examen de la pratique l Universit de Montr al et ailleurs le guide propose deux chelles op rationnelles l chelle A pour l attribution directe de notes litt r
5. tudiants dont on a eu trace car ils ont crit un examen ou soumis un travail mais qui n ont pas r ussi le cours 16D s des circonstances fortuites ou personnelles l chec reste possible mais un taux d checs plus lev que 5 devrait tre consid r anormal 1 Huguette Bernard Les syst mes de notation dans Dossier sur l valuation Service P dagogique Universit de Montr al 1979 pp 101 103 10 r f rences qu elle cite sur le manque de corr lation entre les notes et le succ s professionnel Classification de la r ussite Une fois que l pineux probl me des checs a t r gl le reste est plus facile La population des tudiants qui ont r ussi est relativement homog ne et on peut attribuer des mentions selon la proportion des tudiants qu on s attend avoir chaque niveau A mon avis les meilleurs 50 devraient recevoir des A et B tandis que les autres 50 se verraient attribuer les mentions C et D J ai maintenant r pondu la question que j avais pos e aux instances officielles quelle doit tre la moyenne d une classe moyenne On peut d duire que la note m diane pour les tudiants qui ont r ussi doit se situer mi chemin entre C et B En plus de d tails voici une r partition qui semble raisonnable avec des mentions descriptives A 20 m rite une bourse magna cum laude et peut tre admissible au PhD B 30 admissible la ma trise cum
6. 4 B B 3 0 65 69 B B 2 7 60 64 C F 2 3 55 59 C 2 0 50 54 D 1 0 0 49 F 0 0 On remarque certaines constantes dans ces chelles Dans chacune les mentions A et B correspondent aux m mes intervalles de notes 80 100 et 65 79 respectivement Il y a moins de paliers que pr vus dans notre r glement mais les intervalles sont plus r guliers multiples de 5 II y a deux diff rences principales avec l chelle de la Commission d abord la limite entre les C et les B se situe 65 et pas 70 comme chez nous Ensuite le nombre de mentions entre B et F est tr s r duit McGill la zone grise notre D D et C est repr sent e par une seule lettre le D Finalement exception faite du A qui n existe pas McGill notons que les pond rations associ es aux lettres A 4 0 A 3 7 etc sont identiques chez eux comme chez nous 13 Les chelles ci dessus ont l avantage d tre plus simples que celle de la Commission mais est ce qu elles refl tent nos habitudes en mati re d valuation En particulier pour fixer le seuil entre B et C 65 McGill il faudrait savoir quelle est la note m diane de nos tudiants Je cherchais aussi un seuil raisonnable pour d partager les A des B Pour r pondre ces questions j ai fait une analyse rapide des bulletins des tudiants dans mon D partement 14 Regard sur les moyennes cumulatives Plus pr cis ment j ai fait l analyse des moyennes cumulatives
7. Guide pratique de l valuation litt rale Jean Vaucher Professeur titulaire Groupe Incognito D partement d informatique et de recherche op rationnelle Universit de Montr al octobre 1990 r vis septembre 1991 Avant propos Ce guide a t crit dans le but d aider mes coll gues attribuer des notes correctes avec facilit et confiance Tout d abord je devrais souligner que je n ai aucune qualification ou dipl me particulier qui me permette d imposer quoi que ce soit en mati re d valuation Par contre cette ann e comme tous mes coll gues j ai v cu l introduction de la notation litt rale sans mode d emploi et j ai d r viser mes techniques d valuation inventer un sens aux lettres de la notation trouver des trucs pour calculer mes notes et refaire mes programmes d ordinateur Bref passer beaucoup de temps faire marcher la technique Avec le guide j esp re vous viter mon travail de r invention de roue Suite des discussions sur le sujet j ai aussi remarqu que je n tais pas le seul avoir eu des probl mes appliquer et interpr ter la m thode litt rale En particulier il ne semble pas y avoir consensus sur le sens des lettres Ceci est grave car si nous devons changer de syst me afin de nous normaliser il faudrait s entendre sur cette norme afin de pouvoir s y conformer De la situation actuelle o chacun est forc d inventer sa m thode se d
8. Un bon travail comp tent B Peut tre le projet n a pas avanc autant que pr vu mais ce qui est fait est bien test et bien document peut tre le travail accompli est excellent mais la documentation n est pas tout fait satisfaisante elle devrait cependant tre ad quate pour quelqu un qui voudrait continuer le projet plus tard 60 70 On commence manifester un certain m contentement C Peut tre un programme existe mais il n a pas t test s rieusement peut tre le travail n est pas document de fa on ad quate Le projet pourrait difficilement tre repris et continu par une autre personne 50 60 La d ception D L tudiant a accompli assez de bon travail pour qu on lui accorde ses cr dits mais le projet n est pas utilisable il y a trop d erreurs ou de lacunes ou tout simplement le projet n est pas termin la date voulue lt 50 L chec EetF A votre avis le travail de l tudiant n est pas suffisant en quantit ou en qualit pour qu on lui accorde des cr dits Je vous sugg re aussi d utiliser la note 49 pour des cas douteux si l ensemble du dossier le justifie le jury pourra monter la note 50 Si vous voulez que l chec soit d finitif mettez une note en bas de 45 Pour des projets presque termin s je vous sugg re d accorder une note bas e sur l tat r el du projet quitte changer avant les r unions du jury mi mai plut t que d accorder une note plus g n reuse bas
9. a trise additionnelle La notion de comp tence recouvre toute une gamme d habilet s On sait que dans tout domaine certains praticiens sont meilleurs que d autres et que la majorit sont moyens voire tr s moyens mais chaque praticien comp tent doit pouvoir fonctionner utilement et il doit pouvoir se d marquer des personnes qui n ont pas re u sa formation Par analogie prenons des m tiers il y toutes sortes de plombiers mais on s attend ce que chacun puisse installer un robinet souder des tuyaux et d boucher une toilette De m me tout journaliste doit pouvoir crire un texte lisible De mani re pratique et mesurable dans le contexte universitaire l attestation de comp tence dans un domaine mentions A B ou C signifie que l tudiant est pr t aborder d autres activit s emplois ou cours qui d coulent du domaine en question Si votre valuation ne vous permet pas d attester ce degr de comp tence il faut l indiquer avec D E ou F La mention D passable d note une situation o l tudiant a d montr une connaissance minimale des notions importantes du cours sans faire preuve de ma trise ni de facilit avec la mati re On ne voit pas l utilit faire reprendre le cours mais l tudiant n est pas m r pour aller plus loin A l UdeM un D repr sente une faiblesse qui peut tre rachet e par des r sultats sup rieurs ailleurs afin de maintenir une moyenne de C A McGill le sens du D
10. a notation litt rale devient utile car on peut faire la normalisation dans le passage des scores aux lettres en tablissant un seuil de r ussite et en divisant les notes de passages en intervalles gaux La distinction est maintenant claire le score est un nombre objectif et immuable tandis que l valuation est une lettre obtenue du score avec les corrections qui s imposent Cependant les principes nonc s plus haut restent valables Les examens devraient tre con us afin que les scores correspondent le plus possible aux valuations normales chelles A ou B Un autre sch ma de conversion ne sera 22 utilis que pour viter des erreurs syst matiques ou grossi res et cet autre sch ma ne devra pas entrainer une r duction de note Exemples concrets Prenons quelques exemples camoufl s pour prot ger les innocents pour voir comment les principes pr c dents pourraient s appliquer CAS 1 examen intra de premi re ann e z0 20 E oi 0 10 20 z0 40 10 60 TO 20 30 100 IFT 1 88 examen intra R sultat typique de premi re ann e L examen semble valide bonne r partition de notes moyenne de 62 et m diane de 63 et 23 d checs Pas d ajustement n cessaire 23 CAS 2 examen final de premi re ann e z0 20 ae Eee o 10 20 z0 40 50 60 70 SON 90 100 IFT 1488 examen final Ici examen semble nettement trop dur et discriminatoire moyenne de 44 m diane
11. ales et l chelle B pour toute combinaison de lettres ou pour conversion entre lettre et pourcentage normalis Un principe est clair l valuation litt rale implique la normalisation des r sultats Cependant il faut que les notes restent per ues comme un r sultat direct du travail de l tudiant Je d gage deux recommandations utiliser une formule d ajustement simple et ne jamais r duire une note Je ne m attends pas ce que vous soyez d accord avec tout ce qui a t expos ici Toutefois j ose esp rer que le guide contribuera normaliser le processus d valuation et vous aidera attribuer des notes justes avec facilit et avec confiance 26 Annexe 1 La correction des tests objectifs Dans les sections pr c dentes nous avons vu comment convertir en notation litt rale des notes exprim es en pourcentage C est dire comment passer d un syst me avec un tr s grand nombre de r sultats possibles 100 et plus avec des d cimales un autre qui a un nombre plus restreint de possibilit s 7 mentions avec l chelle A 12 avec l chelle B ou 13 selon le r glement p dagogique Ici je veux traiter un probl me diff rent comment tablir la bonne mention partir d un syst me avec un nombre limit de r sultats par exemple un test compos d une seule question objective avec deux r sultats possibles bon ou mauvais PASS FAIL S il semble appropri de mettre F pour un mauva
12. ation des notes 20 La normalisation des notes Il est tr s difficile de concevoir un bon examen un examen qui mesure correctement les connaissances de l tudiant selon les objectifs p dagogiques du cours et qui exprime cette mesure avec des notes qui cadrent avec nos chelles Dans une situation statique mati re fig e et titulaire long terme on peut am liorer les examens d ann e en ann e en v rifiant le degr de pertinence et de discrimination de diverses questions Mais qui de nous se trouve dans une telle situation En r alit la mati re volue d ann e en ann e et les professeurs changent de cours tous les trois ans Plus un professeur tient son enseignement coeur plus il aura tendance innover et plus il lui sera difficile de concevoir de bons examens Il est donc certain que les notes seront biais es trop hautes trop basses ou trop peu r parties Que faire Une solution c est la normalisation des notes le tripotage diront certains Par normalisation j entends l ajustement des notes brutes obtenues dans un examen suite la d tection de d fectuosit s dans cet examen 3 Ceci dans le but de rendre les notes plus repr sentatives de la comp tence r elle des tudiants Mais ATTENTION Toute manipulation r duit la cr dibilit d une valuation et il faut que les notes restent per ues comme un r sultat direct du travail de l tudiant et non pas comme le r sultat de manipulations
13. aux d chec dans un cours Question tra tre Faites tr s attention au sens que vous attribuez au mot pr voir Doit on faire couler du monde Est ce qu un taux d chec lev est la garantie d un cours s rieux ou la marque d un mauvais enseignant L id al serait de ne pas avoir d checs Mais on ne planifie pas l chec on le constate C est dire qu on ne peut pas fixer a priori un taux d chec Cependant quiconque a enseign surtout en premi re ann e sait qu il y a un nombre impressionnant de candidats qui ne r ussissent pas Mon mod le personnel de la situation est que certains tudiants sont fascin s par le myst re des disciplines pour lesquelles ils ont le moins de talent Dans ce cas le meilleur service qu on peut leur rendre c est de leur faire prendre conscience qu ils sont dans la mauvaise voie Et a le plus vite possible En quelque sorte je vois les examens de premi re ann e comme des s ances d orientation Dans mes cours de premi re ann e je constate une pertel5 d tudiants de l ordre de 20 30 et j estime que la premi re ann e fait partie des tests d admission Par contre si ce triage est n cessaire en premi re ann e il n a plus sa place apr s 16 Ceux qui pensent assurer la qualit par l chec devraient consulter Bernardi7 et les 15J utilise le mot perte car il est difficile de distinguer entre chec et abandon volontaire Par perte j entends des
14. chaque preuve n est pas ce que vous cherchez il faut faire autre chose C est l qu une chelle de conversion comme celle de la Commission peut tre utile Soit A 86 et 0 pour l absence nous avons 7L usage institutionnel qui a t fait de l chelle de conversion se justifie dans le cas de moyennes cumulatives parce que la loi des grands nombres att nue les diff rences individuelles de notation entre preuves et normalise les r sultats 8Je ne pr tend pas qu on doit toujours ajuster les notes afin que les meilleurs obtiennent des A Le niveau des tudiants admis varie d ann e en ann e et le hasard fait que certaines classes sont exeptionnellement faibles Le sujet sera trait plus en d tails dans une section sur la normalisation des notes une moyenne de 86 0 0 0 4 21 5 ou F qui traduit bien la situation 9 Facile qui sait comment s y prendre COROLLAIRE ne pas laisser d autres votre secr tariat la Facult le centre de calcul ou le bureau du Regjistraire le soin de combiner des valuations litt rales d preuves partielles il est probable qu ils utiliseraient la m thode des points avec les aberrations qui en d coulent Il est recommand de faire vos propres calculs et de soumettre une seule note litt rale globale Une chelle de conversion est donc utile pour la combinaison de notes litt rales mais toutes les chelles ne sont pas aussi bonnes les unes que les autres En
15. combiner et traduire des r sultats de tests en valuation Et ceci avec coh rence facilit et certitude Dans ce qui suit je pr senterai d abord les extraits du r glement p dagogique qui d crivent la notation litt rale ainsi que l chelle de conversion de la Commission des tudes Ensuite je d crirai certains probl mes typiques rencontr s avec le nouveau syst me puis je proposerai un sch ma d valuation qui proc de en deux tapes distinguant en premier lieu la r ussite de l chec pour ensuite attribuer des mentions lettres appropri es Finalement j exposerai certaines techniques que j ai trouv utiles et je montrerai comment elles s appliquent dans des cas concrets tir s de mon exp rience SF Fontaine Evaluer Mesurer dans Dossier sur l valuation Service P dagogique Universit de Montr al 1979 D finition du syst me de notation litt rales Le r glement p dagogique de la Facult des Arts et Sciences section 7 1 d crit le syst me de notation litt rale par la table suivante Lettres Points Mention A 4 3 A 4 Excellent A 3 7 B 3 3 B Tr s bien B 2 7 C 2 3 C Bien C 1 7 D 1 3 D 1 0 Passable E 0 5 Echec faible F Echec nul Certains seuils ajoutent un sens ces lettres Au premier cycle la note de passage pour un cours est D ou mieux De plus on exige une moyenne g n rale de 2 0 C ou mieux pour la r ussite d un programme Ces deux seuils co
16. de 42 une majorit d checs et juste 5 tudiants en dessus de 80 De plus c est le m me groupe que pour le cas 1 exception faite d abandons des plus faibles On voit que les r sultats ne concordent pas avec ceux de l intra Solution ajustement global On fixe la note de r ussite 30 et on r partit les 10 paliers de l chelle B D C C C B B A sur la plage de 30 100 On essayera de faire un meilleur examen la prochaine fois CAS 3 examen final de derni re ann e c oN b 0 10 20 30 40 50 60 70 80 930 100 Examen final IFT 5 HH Examen discriminatoire R sultats semblent valable Aucune correction CAS 4 notes globales en derni re ann e 24 ner CH 0 10 20 Z0 40 SO 60 70 80 90 100 Note globale ift3HHH Ici on a un cours option avec des tudiants motiv s Les bons r sultats ne sont pas surprenants L cart est assez restreint Ceci refl te l homog n it de la classe et le fait que la note est le r sultat combin de 5 preuves Autres techniques Dans ce guide j ai abord les principes et la pratique de l valuation dans un cadre assez g n ral Reste que certains types d preuves am nent des probl mes particuliers L annexe 1 traite un tel cas l emploi de la notation litt rale pour des examens objectifs avec un nombre limit de questions Il y a aussi des pratiques locales qui m ritent d tre plus largement connues L annexe 2 d crit les
17. e sous groupes Avec ces formes de travaux la pertinence et l utilit de la notation litt rale sautent aux yeux Cependant on n a pas contourn pour autant le probl me de conversion de notes car il faut souvent combiner et pond rer les r sultats de plusieurs preuves pour obtenir une note globale Comment faire Ceci nous am ne un troisi me probl me car l utilisation des points associ s aux lettres A 4 B 3 etc s est av r e sp cialement non recommandable pour la combinaison de notes litt rales Un exemple illustre le probl me Prenons un cours comportant 4 preuves avec pond rations gales Il est clair qu apr s avoir bien r ussi la premi re preuve avec A 4 points l tudiant peut s abstenir de se pr senter aux autres preuves car un calcul de la moyenne selon les points 4 0 0 0 4 donne 1 0 ou D et il est assur de la note de passage Un peu de r flexion montre l erreur dans ce raisonnement L usage des points par l Universit pour le calcul de la moyenne cumulative va de pair avec la r gle que chacun des cours doit tre r ussi avec D 1 0 ou mieux Un cours chou ne contribue pas la moyenne mais il doit tre repris ou remplac Appliquant cette philosophie aux preuves l int rieur d un cours on conclut que l chec une preuve entra ne l chec au cours Donc loin de r ussir notre tudiant coule mis rablement Si l exigence de r ussite de
18. e sur des promesses Paul Bratley 1984 19 Combinaison de notes chelle B Pour combiner les r sultats de plusieurs valuations litt rales il est utile d avoir une chelle de conversion avec des gradations plus fines On cherche aussi avoir une chelle lin aire afin d viter les anomalies que nous avons relev plus t t Apr s plusieurs essais voici une proposition qui couvre toutes les mentions de notre r glement sauf D avec des notes repr sentatives milieu d intervalles centr es sur des multiples de 5 Mention Equivalence Plage A 100 92 5 100 A 90 87 5 92 5 A 85 etc B 80 B 75 B 70 C 65 C 60 C 55 D 50 47 5 E 40 29 5 F 0 0 29 5 Avec cette chelle les notes quivalentes pour C et D correspondent exactement aux seuils de 50 et 60 de l ancien r glement En contre partie les bornes inf rieures des intervalles ne tombent plus sur des d ciles Notez qu on a tendu l g rement D vers le bas de 50 47 5 et que la limite entre B et A est pass e de 80 82 5 Je recommande cette chelle pour combiner des r sultats exprim s en notes litt rales22 21 En particulier on vitera l emploi des points A 4 D 1 ou de l chelle non lin aire de la commission des tudes 22 Ne pas utiliser cette chelle pour convertir directement un score num rique en lettre avant d avoir lu la section suivante sur la normalis
19. en date de mai 1989 avant la conversion au syst me litt ral pour divers programmes du D partement d informatique et RO Le premier graphique montre la r partition des moyennes de 100 tudiants choisis au hasard dans nos programmes sp cialis majeur et mineur Ces tudiants avaient r ussis entre 10 et 84 cr dits Les chiffres sont biais s par le fait que les checs n entrent pas dans le calcul de moyenne et que les tudiants avec moyennes inf rieures 60 sont limin s les moyennes rapport es ici sont donc plus lev es que les moyennes obtenues N anmoins ceci nous donne une id e de la r partition des notes des tudiants qui r ussissent c oi 0 10 20 30 40 50 60 70 80 0 100 Moyennes INFO moyenne 72 9 m diane 71 3 r sultats gt 80 18 r sultats gt 85 9 r sultats gt 90 8 maximum 91 8 Selon ces donn es un seuil 70 entre C et B et un seuil 80 entre B et A correspondraient peu pr s nos objectifs d accorder des A et B environ 50 des nos tudiants et des A 20 15 R sultats d tudiants avanc s Si on limite l chantillon aux 56 tudiants avanc s qui ont r ussi 45 cr dits ou plus nous avons des moyennes encore plus centr es autour de 70 O 10 20 30 40 50 60 70 80 30 100 Moyennes INFO gt 45cr moyenne 70 8 m diane 69 0 r sultats gt 80 9 5 tudiants r sultats gt 85 5 3 tudiants r sultats gt
20. esseur d avoir son chelle de conversion et de la communiquer aux tudiants Par contre cette chelle se doit d tre diff rente de celle de la Commission des tudes Dans ce qui suit nous traitons d abord les contraintes que les chelles doivent respecter puis les probl mes que ces contraintes entra nent Ensuite nous regardons des chelles utilis es ailleurs et nous examinons des distributions de notes obtenues l Universit de Montr al pour tablir l applicabilit de diverses propositions Finalement je proposerai deux chelles pratiques Prenons d abord les contraintes Le r glement p dagogique d finit trois seuils de r ussite et ceci d termine implicitement des quivalences Premi rement les mentions E et F d notent l chec tandis que D ou mieux indique la r ussite dans un cours ceci correspond l ancien seuil de 50 Ensuite une moyenne de 2 0 C est n cessaire pour la r ussite d un programme ancien palier 60 et 2 7 ou mieux est n cessaire pour l admission aux cycles sup rieurs 70 selon l ancien r glement Quand on veut aller plus loin il y a des probl mes Premi rement la notation d cimale nous a habitu situer nos seuils et nos notes des multiples de 5 ou 10 mais le nombre de mentions qu il faut accommoder soit 4 ou 11 selon notre r glement p dagogique ne divise pas l gamment les 50 qui repr sentent la plage de r ussite Avec ce nombre de mentions doi
21. est l g rement diff rent plus proche des crit res op rationnels nonc s plus haut M me si le D est une note de passage il ne donne pas acc s aux cours dont il constitue une des conditions pr alables ni n est reconnu si le cours est obligatoire dans le programme de l tudiant 14 Traitons maintenant de l chec mentions E ou F Dans chaque mati re il y a un niveau minimal de connaissances que tout tudiant devrait acqu rir Si un niveau minimal de connaissances n est pas atteint nous devons constater l chec Comme l chec a des cons quences s rieuses sur le d roulement des tudes d un tudiant il faut tre absolument s r de ce jugement Un examen bien con u peut aider la d cision Imaginons un examen avec des sections faciles d autres moyennes et difficiles Vous pourrez conclure l chec non seulement parce qu un seuil comme 50 n a pas t acquis mais aussi par la nature des erreurs Par exemple question X repr sente le B A BA du cours et le candidat n a m me pas pu y r pondre De fa on pratique ceci veut dire qu un coll gue pourrait facilement corroborer votre conclusion Si vous n tes pas s r de votre jugement d chec Utilisez la zone grise le D 14Explication des bar mes Bureau du Registraire McGill 9 Autre conseil avec un seuil 50 laisser des notes entre 49 et 50 invite la contestation Je les augmentera
22. gage une impression de flou et d arbitraire qui pourrait facilement mener la contestation de la l gitimit des notes Pour claircir la situation j ai contact des sources officielles l Universit et j ai pos la question suivante quelle devrait tre la moyenne d une classe moyenne au premier cycle Dans mon esprit a aurait pu tre C avec 2 niveaux plus haut A et B et 2 niveaux plus bas D et chec Dans une deuxi me tape de r flexion constatant qu un tudiant doit maintenir une moyenne de C pour r ussir un programme de premier cycle j ai d duit que si chaque professeur fixait sa moyenne C la moiti de nos tudiants chouerait sur la moyenne g n rale Quelle moyenne donc faudrait il viser afin que le syst me marche C B B La r ponse officielle ne m a pas aid Il n y a pas de norme m a t on dit a d pend des d partements et des titulaires Suite cette exp rience j ai d cid qu il serait utile de passer quelque temps mettre sur papier ce que mes coll gues et moi avions appris conclu ou labor cette ann e en mati re d valuation Je dois avouer que je n ai pas fait de recherche bibliographique en bonne et due forme J ai bien ouvert Bloom au d part mais je l ai vite referm et ce n est qu la toute fin du travail que je suis tomb sur les monographies de notre Service P dagogique Deux volumes sont pertinents et j e
23. haque intervalle de 5 ou 10 je calcule et j applique une correction fixe Prenons un exemple Disons que la meilleure note obtenue est 82 et que je consid re que ceci repr sente un A Une fa on simple et rapide pour normaliser serait d ajouter 9 points toutes les notes entre 80 et 90 le 82 deviendra un 91 8 points celles entre 70 et 80 et 1 point celles entre 10 et 20 II reste le cas o l examen est trop discriminatoire Les bons tudiants sont bien not s mais pour une raison ou une autre on a l impression qu il y a trop d checs Ce cas est rare mais je l ai rencontr en premi re ann e pour des examens objectifs avec correction stricte Si on peut d cider d un seuil de r ussite on peut toujours diviser les notes de passage en intervalles gaux correspondant aux mentions de l chelle A ou B et attribuer soit les mentions soit les notes quivalentes Certains professeurs sont rebelles l id e d ajuster les notes Ils disent si notre meilleur tudiant n a r pondu correctement qu 5 questions sur 10 son score est 5 sur 10 ou 50 et il est malhonn te de pr tendre autrement Comment donc justifier de remonter sa note 80 ou 90 C est ici qu il est utile de distinguer entre score et valuation car m me si le score est 5 sur 10 il est possible que ceci repr sente un excellent r sultat qui devrait tre not 80 ou 90 selon nos bar mes types C est ici que l
24. ie un jugement de valeur une mesure du degr de connaissance d une mati re Par exemple selon l chelle de la Commission la r ussite d un cours exige la connaissance d au moins la moiti de la 11 mati re D 50 ou mieux de m me la connaissance de 80 ou plus de la mati re repr sente un r sultat excellent Le premier r le d une chelle de conversion est de servir de mod le explicatif et op ratoire de l valuation Pour les tudiants une chelle est un gage d objectivit Elle permet de juger le degr de r ussite et de pr voir la note finale Deuxi mement une chelle peut servir la combinaison d valuations litt rales car l chelle traduit les valuations en degr s de connaissance qui eux se combinent tr s bien math matiquement Troisi mement dans la mesure o une note en pourcentage est le reflet exact du degr de connaissance d une mati re une chelle peut servir la conversion de pourcentages en lettres Mais attention Si un examen est mal con u ce n est pas l emploi aveugle d une chelle de conversion qui produira une valuation correcte ou objective 8 En fait la philosophie de la notation litt rale pr conise la normalisation des r sultats num riques avant l application d une chelle de conversion j en reparlerai plus loin Malgr ma critique de l utilisation irr fl chie des chelles d quivalences je reste convaincu qu il est essentiel pour chaque prof
25. ion num rique c est par le cumul de ces valuations binaires qu on obtient une valuation plus raffin e Exemple Dans une suite de 15 questions VRAI FAUX un tudiant obtient 11 bonnes r ponses Quelle est sa note globale On convertit en pourcentage avec 100 pour une BONNE r ponse et 0 pour une MAUVAISE L tudiant a donc une moyenne de 11 100 divis par 15 soit 73 un B selon l chelle A ou l chelle B 27 Avec une bonne r ponse en moins dix on obtiendrait 100 10 15 66 un C selon l chelle A ou un C selon l chelle B Notez que selon ce calcul il est impossible d avoir B Mieux vaut se limiter aux mentions A B C D et F de l chelle A et ne pas essayer d attribuer des et des Ma conclusion g n rale sur les tests objectifs est qu il est inutile de donner des mentions plus fines que A B C etc tant qu il y a moins de 25 points distincts dans le sch ma de correction On utilisera plut t un bar me de correction bas approximativement sur l chelle A Le bar me exact pourra tre fix a posteriori pour permettre la normalisation revoir section pertinente Voici quelques exemples de bar mes pour des tests objectifs avec divers nombres de questions Dans chaque cas on associe D la r ussite de 50 au moins des questions et on suit approximativement l chelle A R sultats obtenus Note litt rale 6 questions 7 quest 8 quest
26. is 50 D Par contre je n irais pas plus loin dans cette voie D j 49 l tudiant est loin de la comp tence qu on souhaite N oublions pas le r le des jurys de fin de session pour les cas limites C est au jury examiner globalement le dossier de l tudiant et tenir compte de circonstances particuli res afin de redresser des anomalies grossi res Compl ments sur l chec Pourquoi est ce que les tudiants chouent Est ce parce qu ils sont fondamentalement mauvais et ne devraient pas tre l universit Pas n cessairement Il est vrai que certains n ont pas les aptitudes requises pour certains cours D autres travaillent temps partiel et n ont pas investi l effort requis pour r ussir Des trangers ont le mal du pays Les uns n aiment pas le prof ou la mati re les autres sont d prim s Etc etc Ce ne sont pas les r sultats d examens qui vont nous donner la bonne r ponse J ai dit que l chec indique qu un niveau minimal de connaissances n a pas t atteint j ajoute ici que c est tout ce que a indique Un chec ne permet pas de conclure qu un tudiant est vou l chec ternel dans une mati re donn e et encore moins de conclure qu un tudiant est mauvais globalement Cette fa on objective d envisager la chose devrait permettre l tudiant comme au professeur de voir l chec de fa on moins p jorative et plus constructive Doit on pr voir un certain t
27. is r sultat que donner pour la bonne r ponse C A A Initialement le probl me m a t rapport par coll gue sous une forme assez diff rente Je veux employer la notation litt rale pour mes tests me disait il mais je nai pas assez de questions Apr s explications j ai compris ce qu il voulait dire Dans son cours il donnait assez souvent des tests objectifs avec 5 10 ou 15 questions Maintenant pour tenir compte de toutes les mentions il lui faudrait au moins 22 questions pour distinguer tous les niveaux 11 A A A jusqu D pour couvrir les mentions de la plage de r ussite 50 100 et un nombre gal pour la plage des checs 0 50 Comment faire avec moins de questions Premi re r ponse ne pas utiliser la notation litt rale Continuer avec le vieux syst me de pourcentages pour les preuves interm diaires et ne faire la conversion en notation litt rale qu la toute fin du cours pour la note globale Mais si on voulait vraiment employer les lettres que faire Le principe fondamental qui va nous guider c est que la pr cision de la notation doit correspondre la pr cision de la mesure En physique on parle des chiffres significatifs on ne doit pas exprimer la longueur d un bout de bois comme tant 12 042 cm si l erreur estim e est 0 1 cm on dira plut t 12 0 cm Donc pour une question VRAI FAUX les r sultats sont parfait ou mauvais 100 ou 0 A ou F Comme avec la correct
28. l impression de tripotage 21 Je prends pour acquis deux choses 1 bas sur votre exp rience vous avez compos le meilleur examen possible et 2 vous avez une id e pr alable de la distribution attendue des notes Une diff rence marqu e entre les r sultats attendus et les r sultats obtenus sera un indice de d fectuosit dans l examen Remarquez que c est vous qui devez d cider de ce qui est normal et de ce qui ne l est pas pour une situation donn e Comme exemple de normalisation et sans pr tention que ma m thode soit ni la meilleure ni m me la bonne je vais d crire comment je proc de faisant l hypoth se d une promotion moyenne avec sa part de bons tudiants Je commence avec une liste tri e des notes ou un histogramme Avec un examen valable je m attends trouver 10 ou plus des notes en dessus de 80 et au moins une dans les 90 Si c est exact et si il n y a pas un nombre exorbitant d checs d apr s mon exp rience du cours je juge l examen valable et le processus ne va pas plus loin Si les notes semblent trop fortes je les laisse tel quelles et je pr vois augmenter la difficult de la prochaine preuve Mais si les notes me semblent trop faibles je vais chercher un facteur multiplicatif appliquer chaque note pour que mes meilleurs tudiants obtiennent des A Pour appliquer ces corrections la main sans calculatrice j utilise une variante simplifi e de la multiplication pour c
29. laude C 40 comp tent D 10 passable Il y a deux points importants souligner Premi rement la r partition ne touche que ceux qui ont r ussi et les proportions sugg r es ne sont pas influenc es par le taux d checs L chec est d cr t par un m canisme diff rent comp tence minimale o les proportions n interviennent pas Deuxi mement les proportions visent le long terme il est clair que la proportion exacte des A va varier d une ann e l autre selon la force des promotions Pour terminer voyons A les summa cum laude Devrais je sugg rer un quota comme 1 de la population Pas n cessaire d aller si loin Chaque ann e on trouve des tudiants qui nous rendent heureux d tre professeurs Non seulement ils obtiennent les meilleures notes leurs questions en classe d montrent qu ils anticipent ce qu on va dire Dans leurs examens on trouve des l ments de r ponse qui d passent ce qu on a enseign Souvent ils ont quelque chose nous apprendre et on aimerait qu ils poussent les tudes jusqu au doctorat afin qu ils puissent un jour prendre notre place Ce sont eux les A laboration d une chelle de conversion Une chelle de conversion donne l quivalence entre des notes exprim es en pourcentage et des mentions litt rales Par exemple l chelle de la Commission indique que la mention tr s bien ou B correspond une note entre 70 et 79 D une certaine fa on une chelle assoc
30. n ces travaux pour refl ter l effort investi mais souvent on constate que les examens n ont plus grand effet sur la note finale Il devient quasiment impossible de couler un cours Pour les cours avanc s ceci n est pas trop grave mais en premi re ann e c est un probl me s rieux car il faut pouvoir discriminer afin de r orienter le plus rapidement possible par l chec les tudiants mal plac s La solution en vigueur au D partement c est le bar me avec seuil Par ceci on entend que les travaux pratiques sont contributoires seulement si les examens sont r ussis Les seuils habituels taient 50 ou 40 en litt ral a pourrait tre D ou E Si le seuil n est pas atteint la note de travaux pratiques est limit e la note d examen ou au seuil Voici un exemple avec des pourcentages Soit un bar me avec 40 pour les examens et 60 pour les TPs et seuil 50 Disons que l tudiant a 80 dans les TPs et 45 l examen seuil non franchi Sans seuil le calcul pond r donnerait 80 x 0 6 45 X 0 4 66 ou r ussite comme r sultat final Avec le seuil la note finale reste 45 chec 29 Annexe 3 Tableau comparatif des syst mes de notation 30
31. n recommande la lecture Le premiers souligne tr s bien les probl mes de l valuation le second donne de bons conseils sur la composition d examens choix multiple Cependant ni l un ni l autre ne traite vraiment des probl mes tudi s ici De plus ces documents ont le 11989 1990 2Bloom Benjamin Taxonomy of educational objectives 1956 3Dossier sur l valuation pr sent par France Lafontaine Service P dagogique Universit de Montr al 1979 9 00 4Bernard Huguette et F Fontaine Les questions choix multiples Service P dagogique Universit de Montr al 1979 11 00 d savantage d tre des documents institutionnels En quelque sorte ils engagent l Universit et la r putation acad mique des auteurs Le style se doit d tre temp r afin de ne pas susciter la contestation Le pr sent guide est un document personnel qui n engage pas l Universit Si jamais des contestations taient bas es sur mon texte il serait facile de d savouer l amateur que je suis Je peux donc tre aussi cat gorique et pragmatique que je juge n cessaire et le lecteur sera libre de ne retenir que ce qui lui est utile Par rapport la version pr c dente d octobre 1990 ce texte comporte quelques retouches la section sur l chelle B p 19 et la section sur la normalisation des notes pp 21 22 Remerciements Par leurs commentaires suggestions et corrections plusieurs personnes o
32. nne cumulative des bulletins Probl mes de la notation litt rale Un premier probl me vient de l absence de normalisation des termes et lettres Pour que la notation litt rale puisse faire ressortir le message essentiel d une valuation il faut savoir quelle lettre d note quel message Selon notre r glement voici les messages associ s l valuation Excellent Tr s bon Bon Passable Echec faible Echec nul amoo C est bien d avoir une liste de mots c est mieux de s entendre sur le sens de ces mots Sur des dossiers fran ais on peut trouver des mentions diff rentes assez bien bien et tr s bien Une universit am ricaine utilise les termes conditional pass satisfactory good et very good Comment comparer notre tr s bon avec un assez bien ou un good De m me est ce que le A est attribu 5 des tudiants 10 Il est illusoire de penser obtenir un standard absolu mais il serait souhaitable que certains crit res soient nonc s tout haut afin de r duire les divergences d interpr tation Un deuxi me probl me d coule de l application aveugle de l chelle de la Commission des tudes pour convertir en lettres des r sultats d examens exprim s en pourcentages Comme nous l avons d j dit un pourcentage d note une mesure tandis qu une lettre implique une valuation L application d une chelle pr suppose des r s
33. nt contribu am liorer ce guide Je tiens remercier D B F B G B P B C C G L L L B L U M C S V et P M Introduction Les p dagogues distinguent entre la mesure et l valuation S La mesure c est un score obtenu dans un test quelconque p e 15 sur 20 l valuation c est l interpr tation de ce score p e moyen ou excellent Notre ancien syst me de notation bas sur les pourcentages est ax sur les tests et il s apparente la mesure tandis que la notation litt rale s oriente plus vers l valuation L avantage de la notation litt rale dans les bulletins est de pouvoir faire ressortir le message essentiel d une valuation est ce que l tudiant a r ussi ou chou est il sup rieur la moyenne m rite t il une bourse etc Pour que le processus d valuation fonctionne correctement il faut qu il y ait entente g n rale sur les diff rents jugements qu il est possible d mettre et sur la mani re dont on peut les exprimer par le biais d une seule lettre De plus il faut trouver un syst me facile appliquer et justifier afin de limiter l arbitraire ou l impression d arbitraire pour que tous les intervenants c est dire les professeurs les tudiants et les lecteurs des bulletins aient confiance dans l exactitude du processus Le simple fait d utiliser la notation litt rale dans les bulletins officiels ne r sout pas le probl me fondamental de l valuation comment
34. obscures du titulaire Il faut donc assortir le processus de certaines garanties pour les tudiants Voici deux principes que j ai pu d gager Principe 1 ne jamais r duire une note Donc si jamais je donnais un examen trop facile o tous auraient entre 95 et 100 les notes resteraient telles quelles Pas question de r duire les notes pour avoir une moyenne plus raisonnable Corollaire il vaut mieux concevoir un examen trop difficile que trop facile vous pourrez toujours corriger ensuite Principe 2 utiliser une formule d ajustement simple Entre nous je pense qu il est illusoire d essayer d obtenir la fameuse cloche par une transformation quelconque La cloche repr sente les grands nombres long terme Nos examens c est plut t les petits nombres court terme De plus l valuation parfaite est une chim re toute mesure comporte une marge d erreur et il en est de m me avec nos examens Ayant admis que les notes ne pourront jamais tre exactes l objectif premier de la normalisation transpara t c est d viter les erreurs syst matiques ou grossi res Revenons la pratique de la normalisation La premi re tape c est la d tection d un probl me la deuxi me si n cessaire c est l ajustement des notes 23 Dans un premier temps je traite la normalisation traditionnelle de r sultats num riques Comme nous le verrons plus tard la notation litt rale permet de normaliser sans donner
35. particulier une chelle non lin aire comme celle de la Commission peut donner des surprises Par non lin aire j entends que l intervalle en pourcentiles n est pas gal pour chaque mention Par exemple A recouvre un intervalle de 10 tandis que B recouvre un intervalle de 3 Selon l ordre dans lequel on combine les notes il peut y avoir des diff rences marqu es Par exemple prenons deux notes avec pond rations gales 100 A et 72 B Quelle est la mention globale Premi re technique moyenne de 86 ce qui donne A Deuxi me technique passage par les points 4 3 2 7 2 3 5 livrant A ou B selon l arrondi De telles anomalies ne peuvent qu entra ner un sentiment d arbitraire et d injustice 11 II faudra faire attention nos chelles Les grandes lignes de l valuation Le premier objectif d une valuation est de diff rencier la r ussite de l chec Cette d cision est importante Si on d cr te la r ussite on se porte garant de la comp tence du candidat et on engage sa r putation D un autre c t le constat d chec a des r percussions importantes L tudiant doit reprendre le cours Il peut perdre un semestre une ann e ou pire C est aussi un gaspillage pour l Universit car l tudiant a monopolis des ressources qui auraient mieux servi d autres fins Comment trancher dans les cas limites Dilemme En r alit la situation n est pas si difficile
36. rrespondent des moyennes de 50 et 60 selon l ancien syst me Il y a un troisi me point de rep re dans nos r glements c est la moyenne minimale requise pour tre admissible la ma trise 2 7 ou B dans un syst me et 70 dans l autre Aux tudes sup rieures les exigences sont plus lev es La note de passage pour un cours est C article 33 du r glement p dagogique de la FES et la moyenne g n rale maintenir est B ou 2 7 articles 42 et 56 Finalement il existe une table de conversion entre pourcentages et lettres qui a t adopt e par la Commission des tudes Cette table a t largement diffus e par les tudiants et on la retrouve dans certains agendas Nous la reproduisons ci dessous L aspect d taill de cette table sugg re que son emploi est une garantie de l objectivit de l valuation C est loin d tre le cas et je critiquerai plus loin l emploi abusif qui peut en tre fait Effectivement cette table a t adopt e uniquement pour fins de conversion au 31 ao t 1989 de la moyenne cumulative ant rieure des bulletins 6Un tableau des syst mes de notation en vigueur au Qu bec est donn l annexe 3 5 A 90 100 A 85 89 Excellent 80 100 A 80 84 B 77 79 B 73 76 Tr s bien 70 79 B 70 72 C 65 69 C 60 64 Bien 57 69 C 57 59 D 54 56 D 50 53 Passable 50 56 E 35 49 chec faible F 0 34 Echec nul Table de conversion pour la moye
37. t on accepter des intervalles bizarres p e 3 57 Avoir des intervalles de tailles variables Changer le nombre de mentions utilis es Autre consid ration dans le choix des intervalles les intervalles choisis devraient r partir les tudiants en groupes de mani re utile et significative 18Pour viter le cumul des probl mes de conversion on peut tout noter num riquement comme avant et ne convertir en lettre que la note globale 19 Les 4 mentions principales A B C et D ou 11 mentions si on compte les sous divisions A A A B B B C C C D et D sans D 12 Pour avoir une id e d alternatives possibles je vais pr senter la succession des chelles en usage g n ral McGill depuis 1937 pas n cessairement parce que McGill fait mieux les choses que d autres mais parce que McGill utilise la notation litt rale depuis assez longtemps et parce que ces chelles sont disponibles publi es par le Registraire Un tableau des autres syst mes de notation en vigueur au Qu bec est donn l annexe 5 McGill 1937 1971 Mention 80 100 A 1 classe 65 79 B 2 classe 50 64 C 3 classe 0 49 F chec McGill 1971 1980 1 cycle 2 3 cycles Pond ration 80 100 A A 4 0 65 79 B B 3 0 55 64 C F 2 0 45 54 D 1 0 0 44 F 0 0 McGill 1980 pr sent 1 cycle 2 13 cycles Pond ration 85 100 A A 4 0 80 84 A A 3 7 75 79 B B 3 3 70 7
38. ultats normalis s on ne devrait pas s en servir directement avec des notes brutes Par contre une chelle peut servir d talon pour v rifier a posteriori la coh rence d un bar me de correction Je m explique par un exemple Disons que dans un examen donn mes deux meilleurs tudiants obtiennent 67 et 69 respectivement Si j applique sans r fl chir l chelle de conversion je dois leur attribuer la note C En fait le raisonnement devrait se faire l inverse typiquement les meilleurs tudiants dans une classe normale d crochent des A entre 80 et 100 selon l chelle A d faut d autres informations qui expliquent ce r sultat je dois conclure qu il y a un probl me soit dans mon examen soit dans ma correction et la r action doit tre de corriger le probl me par exemple en redressant les notes 8 On n a pas toujours besoin de convertir de pourcentage lettre Certaines formes de travaux se pr tent naturellement l attribution directe de mentions examens oraux dissertations projets et travaux pratiques Dans ces cas on peut proc der avec le mod le de piles Initialement on fait une premi re distinction entre les bons les moyens et les checs les piles Puis on proc de un classement de chaque pile en sous piles par comparaison On peut associer les lettres directement aux piles utilisant les variantes et s il y a vraiment des diff rences remarquables entr
39. urs IFT3051 Ce bar me est presque identique l chelle pratique A La description du niveau de comp tence associ chaque cat gorie est excellente et le bar me a souvent t repris comme mod le Je le reproduis ci dessous en ajoutant entre parenth se la mention pertinente A A etc 20La borne inf rieure exacte devrait tre choisie telle que les r sultats arrondis affich s par des programmes de spreadsheet ou tableurs correspondent aux plages C est dire que la borne inf rieure exacte pour A serait 89 5 pour A 79 5 etc 18 IFT3051 Projets de fin d ann e en informatique Bar me d valuation A titre indicatif je vous sugg re le bar me suivant pour vos projets Vous tes bien sur libre de l ignorer ou de le changer c est vous qui accordez des notes vos tudiants pas moi Je vous demande cependant de ne pas pousser votre g n rosit au point de manquer de toute discrimination 90 100 La perfection A le projet devrait normalement inclure une contribution originale de l tudiant sur le plan des id es ou des m thodes Un simple travail de programmation m me tr s bien ex cut ne devrait pas normalement m riter un 100 80 90 Un excellent travail A bien test bien document et bien conserv pour une utilisation subs quente Si l tudiant n a pas combin des id es originales ou au moins il a accompli le travail avec flair et l gance 70 80
Download Pdf Manuals
Related Search