arXiv論文：仕事AIの記憶を1005課題で検証——短い要約より経験豊富な記録が有効、誤記憶には弱い

結論から言うと、仕事を続けるAIには、過去を短く要約した記憶より、実際に何をして何が起きたかを含む詳しい記録が役立つ一方、間違った記憶にも影響されやすいとする研究が出た。2026年8月5日にarXivへ提出された未査読論文は、長期間の仕事でAIの記憶を測る「ContextWeave」を提案した。

14人が数カ月にわたり行った仕事の流れを、個人情報を守る形で1005個の実行可能な課題へ再構成し、このうち568課題を中心評価に使用。指示、隔離された実行環境、操作履歴、課題別の採点基準をそろえた。同じ基盤モデルで6種類の記憶部品を比べると、最も強い構成は作業場所の完成度を表す点数を68.08から78.20へ、参加者ごとの好みとの一致を41.50から70.60へ上げた。

記憶部品を固定して5種類の基盤モデルを比べても、過去の情報を思い出せる設定はすべてで成績を改善した。ただし効果の大きさには差があり、行動や結果を含む詳しい記憶は無駄な探索を減らす反面、誤った記憶を混ぜた場合の影響も受けやすかった。利用者は、AIに履歴を大量保存するだけでなく、出典、更新日、誤り訂正の仕組みを持たせたい。

査読前で参加者は14人に限られ、一般の職場全体を代表するとは限らない。