arXiv論文：AIの蒸留は質問1件でも学習状態の71.5%を通過、16件で98.9%を網羅

結論から言うと、大型AIの知識を小型AIへ移す「オンポリシー蒸留」では、学習用の質問を大量に用意することより、AIが生成を繰り返す中で多様な状態を通ることが重要かもしれないとする研究がarXivで公開されました。2026年9月3日投稿のプレプリントで、著者らは質問をわずか1件に絞る極端な条件を調べました。

この手法では、小型AI自身が回答過程を生成し、その各段階で教師AIから単語単位の細かな指導を受けます。実験では、1件の質問だけでも数百ステップにわたり改善が続き、複数の課題分野とモデル系列で、全データを使う蒸留の改善分の大半を回復しました。

研究チームが「全データ学習で通る状態のうち何割へ到達したか」を測ると、質問1件で71.5%をカバーし、その多くには最初の100ステップ以内で到達しました。意味の異なる質問を増やすと範囲と検証精度が一緒に伸び、16件で98.9%に達して全データ学習と同等になりました。複数教師の条件でも、分野ごとに異なる16件で全データ版と並んだとしています。

AI開発者には、データ件数を増やす前に、質問がどんな回答過程を引き出すかを測る考え方につながります。ただし、これはオンポリシー蒸留という特定の学習法の結果で、普通の追加学習全般に当てはまるとは限りません。少数データなら計算も必ず少なくなるわけではなく、教師の指導を数百ステップ吸収する処理は必要です。

査読付き会議への採択はページ上で示されていないため、現時点ではプレプリントとして読む必要があります。