arXiv論文：手元で動くPC操作AI、履歴を増やしても成功率は28.56%で頭打ち——長く考えさせても効果薄

結論から言うと、手元のパソコンで動かす小型の画面操作AIは、考える時間や履歴を無制限に増やしても、成功率が素直に上がるわけではない。2026年7月30日にarXivへ提出された未査読プレプリントは、Qwen3-VLの8B・30B-A3B、UI-TARS-1.5-7B、OpenCUA-7Bを、実際のUbuntuアプリを操作するOSWorldの361課題で比較した。

履歴画像を0枚から1枚へ増やすと平均成功率は約18%から25%超へ改善し、同じ操作を繰り返す失敗が減った。しかしQwen3-VL-30B-A3Bでは履歴4枚の28.56%が最良で、8枚では27.16%へ下がり、入力トークンは増えた。最大手順を15回から100回へ延ばしても多くのモデルで成功率はほぼ伸びず、未完了なのに成功と判断して止まる失敗へ変わった。

計画役と操作役を分ける2段構成も、書式ミスと追加計算のため単独構成を下回り、4案の並列生成は一部を回復したが費用が大きかった。利用者は、ローカルAIなら履歴4枚程度と短い手順上限から試し、完了画面や保存結果を人が確認したい。ただしA100 80GB上の特定モデルとUbuntu課題による結果で、一般のPCや全製品にそのまま当てはまらない。

出典はarXiv原論文で、査読前として読む必要がある。