arXiv論文：画像を読むAIのハルシネーションを細かく診断するHalluScope——3万件データと4B/8B診断モデルを提案

結論から言うと、画像を見て答えるAIの「見えていないものを言う」失敗を、ただ検出するだけでなく、種類と理由まで分けて直しやすくする研究です。

arXivに2026年7月23日投稿された「HalluScope: Fine-grained Hallucination Diagnosis for Multimodal Large Language Models」は、ACM Multimedia 2026採択論文です。対象は、画像内容、文章文脈、常識と食い違うマルチモーダルLLMのハルシネーションです。

具体的には、著者らは8種類の原因と5つのタスクカテゴリを含むHalluScope-30Kという診断データセットを作り、HalluScope-4BとHalluScope-8Bという診断モデルを訓練しました。検出、分類、説明を同時に学ばせる報酬設計により、MHALOベンチマークと独自の細分類ベンチマークで既存手法を上回ったと報告しています。

さらに、診断説明を使ってQwen3-VL-8B-InstructやLLaVA-1.5-7Bの回答修正を促す実験でも効果があったとしています。ユーザーには、画像AIの答えを安全確認や資料チェックに使う時、どのタイプの間違いかを見える化する価値があります。ただし論文はカメラレディ前のarXiv版です。出典はarXivです。