arXiv論文：AIの自己修正は全工程に大型モデル不要——批評役は小さくても効果

結論から言うと、AIに「作る→問題点を指摘する→直す」を繰り返させる場合、3工程すべてへ同じ大型モデルを使う必要はない可能性があります。2026年8月21日にarXivへ投稿された論文「Asymmetric Capacity Allocation in Self-Refinement Pipelines」は、自己修正の各段階でモデルの大きさが結果へどう影響するかを調べました。

研究チームは異なる分野の5ベンチマークを使い、Qwen3の6種類の規模とGemma 3の4種類の規模を組み合わせて、生成役、批評役、修正役を比較しました。その結果、最初に回答を作るモデルと最後に直すモデルは、大きいほど全体の成績が上がる傾向がありました。特に修正役が小さすぎると、批評を受けた後にかえって答えを悪くする場合があります。

一方、批評役の大きさによる差は小さく、小型の批評役でも批評なしより一貫して良い結果でした。文章やコードを自動で見直す仕組みを作る人は、高価なモデルを全段階へ置かず、生成と修正へ計算資源を集中し、批評を軽量化できる可能性があります。ただし、これはarXivの未査読論文で、Qwen3とGemma 3、選ばれた5評価での結果です。

具体的な費用削減率は示されておらず、重要な文書やコードでは小型批評役の見落としを人が確認する必要があります。