GUIの座標ハルシネーションを防ぐ回帰フリーのグラウンディング

arXiv cs.AI ・ 2026-08-10

原題: Hallucination-Free GUI Grounding via Regression-Free Layout-Aware Matching

AI による要約

GUI操作エージェントにおいて、マルチモーダルLLMが起こす位置の誤認識を防ぐ回帰フリーのグラウンディング手法が提案された。凍結したMLLMでユーザー指示を構造化記述に変換し、専用モデルで精密な要素特定を行うことで正確な画面操作を実現する。

この要約は当サイトの AI が生成したものです。正確な内容は元記事（arXiv cs.AI）をご確認ください。