ATRにおけるマルチモーダル翻訳通信研究 : マルチモーダル・ユーザ・インターフェースの実装

スポンサーリンク

概要

論文の詳細を見る
視覚情報を利用したマルチモーダル・システムでは、ユーザはコミュニケーションの手段として、画面上に表示されているオブジェクトを直接指示するジェスチャをしばしば用いる。直接指示のジェスチャは、人間同士の対話において、具体的な長い固有名の発話を指示詞などの使用によって回避させ、対話を簡略化する働きを持つ。したがって、ジェスチャは、音声認識の負荷の軽減により音声翻訳システムに好ましい影響を与えると考えられる。しかしながら、ジェスチャは多くの場合において曖昧で不完全であり、時として発話情報や文脈情報なしでは理解不能ともなり得る。われわれはこれまで、地図を用いた道案内タスクにおける直接指示のジェスチャを分類し、発話とジェスチャの関連性を分析してきた。また、その知見をもとに、マルチモーダル・インターフェースのプロトタイプの構成を紹介した。今回は、そのインターフェースの改良版について報告する。
社団法人電子情報通信学会の論文
1995-10-19

著者

関連論文

もっと見る

スポンサーリンク