Summary

  • Ofqual の 2020 年成績処理は、緊急時のモデル設計、証拠境界、異議申立て、個別結果をめぐるデータ統治の説明責任事例である。
  • 記録は標準化、監督、コミュニケーション、是正の統制分析を支えるが、争われた各成績を意図の証拠とみなすものではない。

政策目的と算出方法

政府のOfqual 首席規制官への指示は、学校間の標準化と過年度に近い分布を政策条件とした。Ofqual は協議後、進学などを止めないための例外的な成績付与制度を決定した。

ここで消えたのは、反実仮想を確かめる手段である。受験者が試験を受けていない以上、センター評価成績（CAG）も算出成績も、実際の答案点ではない。制度は不確実性の中で決める必要があったが、その不確実性まで消えたように説明してはならなかった。

人の判断と統計の接続

学校・カレッジは CAG と科目内の順位情報を提出した。2020年結果算出要件は試験委員会の実施を拘束し、技術中間報告は学校の過年度実績、当該年度集団の既往成績、順位を使った分布算出を説明している。

小規模集団で CAG の比重を高めたことは、統計的根拠の強さが一様でないと認識していた証拠である。Ofqual 理事会議事録は緊急時の組織的審議を示すが、個人の動機を立証しない。議会に提出された理事長の書面説明も、政府指示と規制・技術上の責任を区別している。

平等分析の射程

生徒単位の平等分析は、保護特性を持つ受験者や不利な社会経済的背景の受験者に対する体系的偏りの証拠を、算出成績にも最終成績にも見いださなかった。この公式結論を逆転させてはならない。

ただし、個々の成績の正しさを保証したわけでもない。CAG の評価研究は教員判断にもばらつきがあることを示す。外れ値研究は、学校の通常像と異なる生徒にはモデルの信頼性が下がり得るとした。

CAG と算出成績の差の分析が示す最重要点は、個人についてどちらが中止された試験結果に近かったかは分からない、という限界である。

実装と救済

Ofqual が後に公開したR コードは規則を示す支援コードであり、各試験委員会の本番コードそのものではなかった。したがって、CAG との差だけでコード欠陥を認定することはできない。

2020–21年年次報告は外部助言、試験、データ保護、品質保証を記録する。最終結果分析は方針変更後の分布を示す。どちらも個人の失われた試験事実を復元しない。

教育委員会は結果公表前の報告Getting the grades they’ve earnedで透明性と異議申立ての利用可能性を問題にした。これは議会報告であって司法判断ではないが、救済が進路決定に間に合うかという実務上の論点は正しかった。

方針転換と学習

8月17日、Ofqual 理事長はCAG と算出成績の高い方を採用すると発表した。政府と Ofqual の議会回答は、この転換が当初の異議申立て制度の一部を置き換えた経緯を残す。

これは政策と正統性に関する転換であり、全算出成績のソフトウェア不良を意味しない。下院図書館の大学入学への影響は、更新速度が救済の実効性を左右した理由を示す。

Office for Statistics Regulation のモデル信頼性レビューは、担当チームの誠実性を認めつつ、個人出力の人手確認が限定的だったと指摘した。次の制度では、集団分布、保護特性、個人例外、実装、異議申立てを別々の保証項目としなければならない。集団の説明に有効なデータを、そのまま個人の確定事実として扱わないことが基本原則となる。