動画解説と検索を用いたオープン語彙手話認識アプローチ

arXiv cs.CL ・ 2026-09-03

原題: A Reverse Sign Language Dictionary: Open-Vocabulary Sign Recognition from Continuous Signing via Video Captioning and Description Retrieval

AI による要約

固定の語彙セットに依存せず、オープン語彙で手話認識を行う「逆手話辞書」アプローチを提案した。オープンウェイトの視覚言語モデルを用いて手話クリップをプロシージャルな説明文に変換し、多言語文エンコーダを用いてターゲット辞書から最も近いエントリを検索する。

この要約は当サイトの AI が生成したものです。正確な内容は元記事（arXiv cs.CL）をご確認ください。