arXiv論文：小学5年超の知識を除いてAIを学習——LittleLearner、知識獲得を追える実験環境

結論から言うと、言語モデルが新しい知識や能力をどう身につけるかを調べやすくするため、学習内容を米国の小学5年生までに制限したLittleLearnerが提案された。2026年8月13日にarXivで公開された査読前論文で、通常の大規模モデルはWeb上の多様な文章を先に読んでおり、実験で見せた情報を本当に初めて学んだのか判断しにくい問題へ取り組む。

研究チームは、米国の小学校教材に合わせ、5年生より上で教わる概念、事実、語彙を明示的に除いた880億トークンの事前学習コーパスLittleCurriculumを作った。これを使って50億パラメータの言語モデルLittleLearnerをゼロから学習し、自由回答の評価に必要な言語力を持たせながら、知識と能力の境界を学校の学習指針と対応づけた。

最初の実験では、追加学習と、質問時に例や説明を与える文脈内学習で新知識を注入した。どちらも既に持つ知識を使う力は高めたが、設定した学習範囲の外にある能力そのものは向上しなかったと報告する。教育研究やAI評価では、事前知識の混入を減らし、「教えた結果」と「以前から知っていた結果」を分ける実験場として役立つ。

ただし小学5年までという区分は米国の教材基準で、世界の教育内容や人間の発達をそのまま再現するものではない。査読前であり、除外が完全か、別の学習法でも同じ傾向かは公開データと追試で確認が必要である。