言語認識に利用される視覚情報と聴覚情報の関係

スポンサーリンク

概要

論文の詳細を見る
難聴者の読唇による会話理解能力が高いことから,画像には言語認識に必要な言語情報が十分含まれると考えられる。本研究では,言語コミュニケーションにおける視覚情報と聴覚情報の関係を分析するため,提示する画像と音声を制限した実験資料を用いて,難聴者と健聴者を対象に言語認識実験を行った。難聴者実験の結果より,視覚による言語認識の限界と,言語情報を含む顔画像中の部位を同定した。また,健聴者実験の結果より,健聴者と難聴者の視覚からの言語情報抽出能力の差が明らかになった。さらに,健聴者実験では,特定の画像が音声と相補し合い認識の向上につながる,画像と音声の相補関係が確認された。
社団法人電子情報通信学会の論文
1994-01-26

著者

関連論文

もっと見る

スポンサーリンク