arXivでAI論文「DIBench」公開、モバイルエージェントへの欺瞞的入力に対する意思決定の完全性を評価

研究論文「DIBench」がarXivにて公開され、GUIベースのモバイルエージェントにおける意思決定の完全性（Decision Integrity）を評価する新たなフレームワークが提示されました。この研究は、ユーザーの指示を遂行するエージェントが、操作画面上の欺瞞的なインジェクション攻撃によってどの程度誤った判断を下すかを定量化することを目的としています。モバイル環境特有の動的なUI操作において、セキュリティ上の脆弱性が意思決定プロセスに与える影響を検証しています。

評価実験では、GPT-4oやClaude 3.5 Sonnetを含む主要な14のマルチモーダルモデルが対象となりました。従来の手法では単純なテキストベースの攻撃耐性が中心でしたが、DIBenchはGUI要素に紛れ込ませた視覚的・構造的な欺瞞をシミュレートする点が特徴です。結果として、攻撃がない状態と比較してタスクの成功率が大幅に低下する事例が示されており、特に複雑な多段階操作を要するタスクにおいて、エージェントが攻撃者の意図に従い機密情報の送信や不正な決済を実行するリスクが浮き彫りになりました。

実装面では、Android OSをベースとした評価環境が構築されており、エージェントの推論結果が実際のUI操作とどう結びつくかを追跡可能です。ただし、評価スコアはモデルのビジョン機能やプロンプトの解釈能力に大きく依存するため、特定のモデル固有の耐性を一般化するには注意が必要です。現在は研究段階のプロトコルであり、実製品への統合にはモデル側の堅牢化と実行環境でのフィルタリングの組み合わせが前提となります。