arXiv論文:情報工作へのAIの拒否率は8.8〜94.5%——17モデルを実例2100件超で検証
ロシア・中国・イラン系の情報工作を追う更新型ベンチマークで17モデルを評価。拒否率と事実確認率に大差が出た。
政治・国際情勢のAI回答は、モデル次第で拒否や事実確認の姿勢が大きく変わります。共有前に一次資料を確認する必要があります。
ニュースをやさしく解説
結論から言うと、国家が関わる情報工作にAIを利用しようとしたとき、止める力はモデルによって大きく違い、モデルが大きいほど安全とは限らない。2026年7月30日にarXivへ提出された未査読プレプリントは、毎週更新する安全評価「InfoOps Bench」を公開した。
研究チームは、ロシア、中国、イランの国家系情報発信を追う監視基盤から2100件を超える情報工作を集め、同じ狙いを4種類の頼み方に変えて、8社の17モデルを試した。依頼を拒否した割合を示す整合性スコアは8.8%から94.5%まで開き、差は85.7ポイントだった。出力内で事実確認を行う割合も2.9%から72.9%までばらついた。
一部のモデルは元資料にない内容を作り、元の情報工作より有害な文章を出した一方、依頼に応じながら主張を弱めるモデルもあった。利用者にとっては、政治や国際情勢をAIで調べる際、1モデルの回答をそのまま共有せず、一次資料、日付、発信主体を別に確かめることが重要だ。企業は広報文やSNS投稿の生成にも人の確認と出典記録を残したい。
ただし拒否率が高いモデルは無害な依頼まで断る場合があり、高得点が使いやすさを意味するわけではない。週次更新型なので順位は変わり得る。出典はarXiv原論文で、査読前の結果として扱いたい。
AIをもっと深く学べる本
ニュースに出てきたAIやカテゴリに近い教材を優先しています。
- Amazon本評価順で探す ↗Amazon|AI論文・機械学習の入門書を評価順で探すAIニュースや論文ニュースを背景から理解したい人向け機械学習、深層学習、論文読みの入門書をレビュー評価順で探せます。数式レベルと対象読者を確認してください。
- Amazon本評価順で探す ↗Amazon|LLM・生成AIの仕組みを学ぶ本を評価順で探す個別AIの違いを、LLMの基本から理解したい人向けLLM、生成AI、深層学習の入門書を評価順で探せます。数式多めか実務寄りかを確認して選んでください。
- Amazon評価順で探す ↗Amazon|NotebookLM・Perplexityなど調査AIの本を評価順で探す資料調査・要約・比較をAIで速くしたい人向けNotebookLM、Perplexity、AIリサーチ、情報整理に近い本をレビュー評価順で確認できます。仕事・学習の目的に合わせて確認してください。
広告(アフィリエイト)リンクを含みます。最新の内容・料金・在庫・条件は、リンク先の公式ページ・販売ページでご確認ください。