arXiv論文：長時間動画AIを6.13倍高速化、粗い映像で選び必要部分だけ精細に分析

結論から言うと、長時間動画を理解するAIについて、全場面を細かく読む代わりに、まず粗い映像で重要箇所を選び、必要な部分だけ高精細に調べる手法が提案されました。2026年9月15日にarXivへ投稿された未査読論文「VideoMM」は、長い動画で画像情報を表すトークンが増えすぎ、処理時間と費用が大きくなる問題に取り組んでいます。

従来は補助AIでトークンを減らしますが、軽い補助AIでは重要な意味を見落としやすく、高性能な補助AIでは削減による速度向上が消えるという難しさがありました。VideoMMは、縮小したフレームから作る軽量なMacro Proxyで意味のある区間を先に選び、選ばれた場所だけを高精細なMicro Tokensへ対応づけて詳しく推論します。

LongVideoBenchで、全情報を読む比較方式より6.13倍高速になり、正解率も7.4ポイント向上したと報告しています。また、既存の有力手法に対しても推論を2.73倍高速化しました。会議録画、授業、監視映像などから必要な場面を探すサービスの待ち時間や計算費用を減らせる可能性があります。ただし結果は論文の実験条件に限られ、arXivの未査読プレプリントです。

動画の種類や質問によって重要部分の選択を誤る可能性があり、実サービスでの再現性や見落とし率の確認が必要です。