Aller au contenu
ATLAS Humain × IA

Référentiel B — capacité IA

Évaluation automatisée et notation automatique de copies

SectorielEducational Testing Service (e-rater), Turnitin (Gradescope), et moteurs propriétaires de départements d'éducation publics.documentéVérifié le

Capacités clés

  • Notation d'essais par analyse de traits linguistiques — grammaire, usage, mécanique, style, organisation (e-rater)
  • Attribution d'un score par comparaison à un jeu de réponses préalablement notées par des humains, avec sous-score de conventions séparé (moteur de l'État de l'Ohio)
  • Regroupement automatique des réponses similaires pour accélérer une notation humaine assistée, plutôt qu'une notation autonome (Gradescope)

Usages documentés par secteur

ÉducationTRL 9 / 9

Le département de l'Éducation de l'Ohio emploie la notation automatique pour ses évaluations d'anglais depuis 2015, avec une transition complète en 2018 : exploitant public nommé, périmètre nommé, dates établies par son propre document officiel. e-rater est par ailleurs employé opérationnellement par ETS pour le GRE et le TOEFL iBT, toujours en tandem avec une notation humaine.

Notation d'essais et de réponses construites dans des évaluations à enjeu

  • Ohio Department of Education : notation automatique des évaluations d'anglais depuis 2015, transition complète en 2018, avec extraction vers un correcteur humain quand le système ne reconnaît pas la réponse
  • ETS e-rater : sections Analytical Writing du GRE et Writing du TOEFL iBT, en tandem avec une notation humaine ; employé seul uniquement en contexte de faible enjeu

Limites connues

L'échec de référence du domaine reste la standardisation algorithmique des A-levels au Royaume-Uni en août 2020. Il faut le décrire exactement : il ne s'agissait pas de noter des copies — les examens étaient annulés — mais de modérer statistiquement les notes prédites par les enseignants. L'algorithme d'Ofqual a abaissé 36 % des notes d'un cran et 3 % de deux crans, avec un biais systématique défavorable aux élèves des écoles publiques et favorable aux petits effectifs des écoles privées. Il a été abandonné le 17 août 2020 par Ofqual et le ministre de l'Éducation Gavin Williamson, suivi des démissions de Sally Collier (directrice d'Ofqual) et Jonathan Slater (haut fonctionnaire). Tout ce récit — les pourcentages, la date d'abandon, les démissions — repose ici sur une seule source encyclopédique, ce qui est peu pour un fait de cette portée : il demande à être doublé du rapport d'Ofqual avant toute réutilisation. Les deux systèmes opérationnels cités plus haut gardent d'ailleurs un humain dans la boucle : l'Ohio extrait les réponses non reconnues vers un correcteur, ETS double la notation automatique d'une notation humaine sur les tests à fort enjeu. Le chiffre d'adoption de Gradescope (plus de 600 institutions, plus de 60 millions de réponses notées) date de son rachat par Turnitin en octobre 2018 et provient d'un communiqué commercial ; aucun chiffre plus récent et indépendant n'a été trouvé.

Débats documentés

Aucune autre fiche du référentiel ne nomme celle-ci, et celle-ci n'en nomme aucune. Ce n'est pas un signe d'accord : c'est un silence documentaire, et il se comble en écrivant les limites de la fiche avec des noms.

Sources

Analyses de gap citant cette fiche

Aucune paire humain × IA documentée pour cette capacité à ce jour. Le comparateur permet de tester la combinaison et affiche son statut réel.

Fiches connexes — Sectoriel

Données brutes de cette fiche : /api/fiches/evaluation-automatisee-et-notation-automatique — voir la méthodologie.