arXiv論文：長文AIを教師の言い回しだけでなく課題達成度でも学習——5評価平均を最大11.39点改善

結論から言うと、長い資料を読むAIを、小さな言い回しの正しさだけでなく、最後に課題を達成できたかも見て育てる学習法「GC-OPD」が提案されました。2026年8月20日（日本時間）にarXivへ公開された研究です。従来のオンポリシー蒸留では、生徒AIが自分で書いた回答の各単語に対し、強い教師AIがどれほど支持するかを細かく教えます。

しかし長文では、局所的に自然な文でも、資料の離れた場所にある証拠を落としたり、回答全体の条件を破ったりします。研究チームは、入力が長くなるほど教師の評価と、課題全体を採点する検証器の報酬が合わなくなる傾向を確認しました。GC-OPDは、同じ問いから作った複数回答の中で教師評価と検証器報酬をそれぞれ正規化し、その差を単語ごとへ配り直します。

5つの長文評価で、公式Qwen3-4Bは平均29.08から40.47へ、Qwen3-8Bは35.12から44.65へ上昇しました。同じ条件の通常方式は39.31と43.56でした。利用者にとっては、複数文書の比較や根拠集めで、読み落としを減らす学習につながる可能性があります。ただし、これはarXivの未査読プレプリントで、改善幅は5評価の平均です。

検証器の採点基準が間違っていれば、その誤りを学ぶ恐れもあり、実サービスの正確さや料金が直ちに変わる発表ではありません。