Summary

  • La notation Ofqual de 2020 est un cas de responsabilité de gouvernance des données, centré sur le modèle, les limites probatoires, les recours et les résultats individuels en situation urgence.
  • Le dossier permet analyser standardisation, contrôle, communication et réparation sans traiter chaque note contestée comme une preuve intentionnelle.

Une décision publique sans mesure finale

L’annulation des examens a supprimé la donnée normalement centrale: la copie effectivement composée par l’élève. La directive ministérielle demandait une standardisation entre établissements et une distribution proche des années antérieures. Les mesures exceptionnelles annoncées par Ofqual devaient permettre la poursuite des études et préserver la valeur des diplômes.

Ces objectifs étaient légitimes, mais différents. Une distribution nationale cohérente ne répond pas automatiquement à la question: quelle note cet élève aurait-il obtenue lors d’une épreuve qui n’a jamais eu lieu ? Toute la gouvernance aurait dû maintenir cette incertitude visible.

La note du centre n’était pas une vérité observée

Les établissements ont fourni une note estimée et un classement interne par matière. Les exigences réglementaires de calcul encadraient ensuite le travail des organismes certificateurs. Le rapport technique intermédiaire décrit le modèle: historique de l’établissement dans la matière, niveau antérieur de la cohorte actuelle et ordre de classement des candidats.

Le traitement particulier des petits effectifs reconnaissait déjà une limite statistique. Plus l’information de groupe était faible, plus le jugement du centre pesait. Les procès-verbaux du conseil d’Ofqual attestent d’une gouvernance d’urgence répétée; ils ne permettent pas d’attribuer une intention personnelle. La déclaration ultérieure du président relie correctement directive politique, travail technique et responsabilité institutionnelle collective.

Égalité entre groupes et fiabilité individuelle

L’ analyse d’égalité au niveau des élèves n’a trouvé aucun élément montrant un biais systématique des notes calculées ou finales contre les candidats selon leurs caractéristiques protégées ou leur milieu défavorisé. Il faut conserver cette conclusion. Elle interdit d’affirmer que l’analyse officielle aurait prouvé un biais systémique.

Elle ne prouve pas pour autant la justesse de chaque note. L’ évaluation des notes attribuées par les centres montre que ces jugements humains comportaient eux aussi variation et incertitude. L’ étude des cas atypiques reconnaît qu’un élève très différent de la trajectoire habituelle de son établissement pouvait être mal représenté par un modèle de groupe.

L’ analyse des écarts de notes pose la limite décisive: pour une personne donnée, il est impossible de savoir si l’estimation du centre ou la note calculée reflétait mieux l’épreuve annulée.

Le code ne résumait pas le système

Ofqual a publié ensuite un code R de démonstration, tout en précisant qu’il ne s’agissait pas du code final utilisé par les organismes certificateurs. Ceux-ci ont réalisé leurs propres implémentations de production. Un écart entre deux notes ne suffit donc pas à démontrer un défaut logiciel.

Le rapport annuel 2020-2021 rend compte du groupe d’experts, des essais, de la protection des données et de l’assurance qualité. L’ analyse finale des résultats décrit les distributions après le changement de règle. Ces documents soutiennent l’apprentissage, non une certification individuelle rétroactive.

Un recours utile doit arriver avant que l’occasion disparaisse

Avant la publication, le rapport parlementaire Getting the grades they’ve earned avait alerté sur la transparence et l’accessibilité du recours. Cette conclusion parlementaire n’est pas un jugement judiciaire. Elle souligne cependant un point de service: corriger une donnée, contester l’adéquation du modèle et repasser un examen à l’automne ne sont pas le même remède.

Le 17 août, le président d’Ofqual a annoncé la règle de la note la plus élevée entre celle du centre et la note calculée. Les réponses du gouvernement et d’Ofqual montrent comment ce changement a rendu une partie du recours initial sans objet.

Ce revirement fut politique et institutionnel. Il ne prouve ni que toutes les notes calculées étaient erronées, ni que toutes les estimations des centres étaient exactes. La note de la Bibliothèque de la Chambre des communes rappelle que les admissions universitaires étaient déjà engagées: la rapidité du remède faisait partie de sa qualité.

La leçon de gouvernance

L’Office for Statistics Regulation, dans son rapport Ensuring statistical models command public confidence, a relevé l’intégrité des équipes tout en constatant une assurance surtout agrégée et un examen humain limité des résultats individuels.

Une architecture plus solide sépare les preuves: distribution nationale, cohorte de matière dans un établissement, résultat individuel, égalité entre groupes et efficacité du recours. Elle conserve la traçabilité de chaque version et déclenche un examen humain lorsque les hypothèses de groupe sont fragiles. La responsabilité ne consiste pas à trouver un coupable unique; elle consiste à empêcher qu’une preuve valable pour une population soit présentée comme une certitude sur une personne.