5 Septembre 2023

« L’envers des mots » : Docimologie

Nadir Altinok, Université de Lorraine et Claude Diebolt, Université de Strasbourg

Science des examens et des concours, la docimologie, de « dokimè » (épreuve) et « logos » (science) trouve son origine dans les travaux sur la validité des systèmes de notation du psychologue français Henri Piéron. C’est en 1922 qu’il propose le concept et lance des recherches autour des résultats du certificat d’études primaires. Celles-ci seront popularisées par son ouvrage Examens et docimologie publié en 1963, suivi en 1971 par le Précis de docimologie de Gilbert Landsheere.

Ces travaux fondateurs évoquent, de manière originale, le comportement « des examinés et des examinateurs » afin de nous faire prendre conscience des biais et des incertitudes qui pèsent sur les notations et les évaluations. La préoccupation est pourtant loin d’être nouvelle. L’invention même de la note est le fruit d’une longue histoire. Alors que les États-Unis se dirigent dès 1910 vers l’évaluation via les QCM, en France on préfère conserver l’évaluation classique des examens avec des réponses rédigées.

Comment fait-on pour juger une copie d’examen ? Qu’en est-il de la pertinence des notes en cas de répétition de l’examen ou de changement d’examinateurs ? Répondre à ces questions renvoie précisément aux travaux fondateurs de la docimologie. Ils montrent, à partir d’une analyse de la variance, que la part de l’explication d’une note serait liée, à hauteur de 40 %, aux compétences de l’élève. En corollaire, 60 % résulteraient de l’identité de l’examinateur.

Si la méthode utilisée par ces travaux précurseurs est critiquable, ils soulignent néanmoins toute l’ambiguïté entourant la justification d’une note. Henri Piéron ira même jusqu’à dire que « pour prédire la note d’un candidat, il vaut mieux connaître son examinateur que lui-même ! »

Quant aux psychologues Laugier et Weinberg, ils tenteront de déterminer le nombre de corrections nécessaires pour aboutir à une note qui soit « juste ». Ce faisant, mobilisant la formule de Spearman-Brown, ils aboutiront au constat, qu’en philosophie par exemple, il faudrait 127 correcteurs pour aboutir à une note équitable.

[Plus de 85 000 lecteurs font confiance aux newsletters de The Conversation pour mieux comprendre les grands enjeux du monde. Abonnez-vous aujourd’hui]

Cette polémique sur la difficile notation des copies se retrouve régulièrement en première ligne lors des corrections du baccalauréat. Une recherche de 2008 ira même jusqu’à évoquer une sorte de loterie des notes au bac.

En fait, au-delà des polémiques, la docimologie soulève une question majeure. Les notes d’une classe doivent-elles, comme il est très souvent le cas, correspondre à une distribution de Gauss, c’est-à-dire avec quelques élèves « faibles », quelques élèves « forts » et la grande majorité des élèves dans la « moyenne », à l’image de la tyrannie de la Loi Normale qui a régné au Japon entre 1955 et 2000 ?

Un dilemme de taille renvoie en effet, quasi systématiquement, à la moyenne des notes qui induit inévitablement une forme de hasard. Une moyenne trop élevée pourrait signifier une mauvaise appréciation du niveau des élèves, tandis que l’inverse pourrait suggérer des critères de notation trop stricts. Mais, si la majorité des élèves ont une note entre 8 et 12, à quoi bon utiliser une échelle de notation de 0 à 20 ?

Au-delà des moyennes, le bon sens impose de prendre en compte, avec plus d’attention, l’écart-type, c’est-à-dire l’étendue des notes, de la plus basse à la plus haute. Ce faisant, il est aisé d’imaginer qu’une matière d’enseignement pourrait avoir une influence déterminante sur la moyenne générale dès lors que l’écart-type des notes serait plus élevé que celui des autres matières enseignées.

En définitive, quelle est donc la finalité d’une note ? S’agit-il d’apprécier le niveau de compétence et les savoirs des élèves à un instant T, ou d’employer la notation tel un outil afin de classer, si ce n’est de filtrer les élèves, dans l’idée d’aboutir à une allocation optimale des talents dans la société ?

Cet article s’intègre dans la série « L’envers des mots », consacrée à la façon dont notre vocabulaire s’étoffe, s’adapte à mesure que des questions de société émergent et que de nouveaux défis s’imposent aux sciences et technologies. Des termes qu’on croyait déjà bien connaître s’enrichissent de significations inédites, des mots récemment créés entrent dans le dictionnaire. D’où viennent-ils ? En quoi nous permettent-ils de bien saisir les nuances d’un monde qui se transforme ?

De « validisme » à « silencier », de « bifurquer » à « dégenrer », nos chercheurs s’arrêtent sur ces néologismes pour nous aider à mieux les comprendre, et donc mieux participer au débat public.

À découvrir aussi dans cette série :

Nadir Altinok, Maître de conférences, IUT de Metz, UMR BETA, Université de Lorraine et Claude Diebolt, Directeur de Recherche au CNRS, UMR BETA, Université de Strasbourg

Cet article est republié à partir de The Conversation sous licence Creative Commons. Lire l’article original.

" L'envers des mots " : Docimologie

Malgré leur apparence objective, les notes sont influencées par des biais et des incertitudes souvent plus grands qu'on ne le pense. Zoom sur la docimologie, la science qui s'empare de cette ques...

https://theconversation.com/lenvers-des-mots-docimologie-203861

Article republié de The Conversation.com

Faut-il continuer à noter les élèves ?

Si la " constante macabre " des notes a été dénoncée, leur apparente objectivité en fait des outils toujours très prisés dans un système éducatif où la sélection tient une place importante.

https://theconversation.com/faut-il-continuer-a-noter-les-eleves-184694

Maths, lecture : le niveau des élèves baisse-t-il vraiment ?

Les élèves seraient-ils moins performants aujourd'hui en maths et en français ? Remettre en contexte les résultats des dernières enquêtes internationales révèle des évolutions plus complexes.

https://theconversation.com/maths-lecture-le-niveau-des-eleves-baisse-t-il-vraiment-198432

Examens : comment inciter les élèves à relire ce qu'ils écrivent

Lors d'un examen, les élèves sont souvent réticents à se relire, alors que cette étape est décisive pour leur réussite. Quelques clés pour les encourager à faire cet effort.

https://theconversation.com/examens-comment-inciter-les-eleves-a-relire-ce-quils-ecrivent-198092

Comment les notes ont-elles pris tant d'importance dans le système scolaire ?

" En présentiel " comme à distance, les bulletins de notes scandent les années scolaires. D'où vient ce mode d'évaluation ? A-t-il toujours fait consensus ? Éclairage historique avant la rent...

https://theconversation.com/comment-les-notes-ont-elles-pris-tant-dimportance-dans-le-systeme-scolaire-142440

Examens : la fin de la triche n'est pas pour demain !

À l'université, l'organisation de partiels à distance pose la question de leur équité et remet sous les feux des projecteurs un problème ancien, celui de la fraude aux examens. Eclairage hist...

https://theconversation.com/examens-la-fin-de-la-triche-nest-pas-pour-demain-138972

Évaluation des étudiants : sortir de la note sur 20

Il faut interroger les façons d'évaluer si l'on souhaite que les étudiants " apprennent autrement " et " apprennent mieux ". Analyses de quelques pistes.

https://theconversation.com/evaluation-des-etudiants-sortir-de-la-note-sur-20-84632

Noter ou ne pas noter à l'école ? Et si nous nous trompions de question ?

Il y a urgence à réorienter le débat, en revisitant la formation des enseignants et en interrogeant les rapports ambigus qu'entretiennent souvent les lois et les pratiques dans les écoles.

https://theconversation.com/noter-ou-ne-pas-noter-a-lecole-et-si-nous-nous-trompions-de-question-99460

Évaluation : est-on condamné à la perpétuité ?

Il faudrait n'évaluer qu'à bon escient, et au bon moment. Mais comment être sûr de n'évaluer qu'" à propos " ? Comment trancher de la pertinence de l'évaluation ?

https://theconversation.com/evaluation-est-on-condamne-a-la-perpetuite-93837