マルチモーダル対話における発話文生成とジェスチャ生成に関する一考察
スポンサーリンク
概要
- 論文の詳細を見る
対象を小学校1年算数の世界に絞り込み,問題文と図表が混在しているドリルテキストならびに人間(教師)との対話を相互参照しながら算数の問題解決を行うシステムの開発を進めている.対話形式としては言語とジェスチャを併用したマルチモーダル対話を考えている.本論文では,システムが発話とそれに伴うジェスチャの生成方式について考察する.本システムのジェスチャはテキスト上の対象物に対する指示操作や描画操作で,ペン先の3次元的な動きとして表現される.本論文では,ジェスチャとその対象との関係に着目し,ジェスチャの意味表現としてジェスチャフレームを定義する.まず,対話支援型問題解決システムの構成を概観した後,ジェスチャフレームを用いた発話文生成と協調したジェスチャ生成手法を提案する.最後に,シミュレーションによりジェスチャフレームの評価を行なう.
- 電子情報通信学会の論文
- 1999-11-20
著者
関連論文
- J-011 触力覚提示を利用する画像処理ツールに関する考察(ヒューマンコミュニケーション&インタラクション,一般論文)
- 免疫機構に基づく直観型グラフィックス画像作成支援システム
- 触覚デバイスを併用する画像処理ツールの開発
- 免疫機構に基づく直観型グラフィックス画像作成支援システム(高精細画像の処理・表示,及び一般)
- 触覚デバイスを併用する画像処理ツールの開発(高精細画像の処理・表示,及び一般)
- LK_001 混成型遠隔力覚共有システムの開発と評価(K分野:ヒューマンコミュニケーション&インタラクション)
- LJ_005 配色をインタラクティブに反映するデザイン支援ツール(J分野:グラフィクス・画像)
- 対話型進化計算に基づく3次元物体触感の生成法(人間要素を取り込む計算知能)
- 触力覚デバイスを用いたテクスチャ特徴の解析に関する一検討 (第11回知能メカトロニクスワークショップ講演論文集) -- (アプリケーション)
- 触覚デバイスを併用する画像処理ツールの開発
- 対話型進化計算に基づく3次元CG創作支援技術
- フーリエ級数を利用した3次元データ表現法とその応用 : 2次元画像フィルタによる3次元モデル造形法(コンピユータグラフィックス)(「インタラクション:理論,技術,応用,評価」)
- 陶磁研究に役立つ発想支援システムの考察 : 柴田コレクション作品画像の特徴抽出と陶磁研究への応用
- 配色に基づくデザイン支援ツールに関する一考察
- 焼き物データベースにおける検索手法の考察 : 柴田コレクションにおける皿の形状検索
- テキストを対象とした発話に伴うペン操作の解析に関する一検討
- ペンを利用したマルチモーダル対話におけるペン操作の生成
- ペンを利用したマルチモーダル対話におけるペン動作生成の一検討
- ペンを利用したマルチモーダル対話におけるペン動作生成の一検討
- 対話支援型問題解決システムにおける発話文生成機構と文脈処理
- 言語情報を用いた図形操作の解釈に関する一考察
- 対話における発話と指示操作との協調理解
- 問題解決過程における対話の分析
- マルチモーダル対話における発話文生成とジェスチャ生成に関する一考察
- マルチモーダル対話における背景要素との関係構造に基づくジェスチャ解析の一手法
- マルチモーダル対話における発話文との統合を考慮したジェスチャ解析に関する一考察
- マルチモーダル対話を用いた問題解決システムにおける音声発話文解析処理
- マルチモーダル対話のためのジェスチャ生成に関する考察
- マルチモーダル対話における発話文生成とジェスチャ生成に関する一考察
- マルチモーダル対話におけるジェスチャ認識の一手法
- マルチモーダル対話のためのジェスチャ生成に関する考察
- マルチモーダル対話におけるジェスチャ認識の一手法
- 対話支援型問題解決システムにおけるジェスチャ解析の一手法
- ニューラルネットワークを応用した領域の併合法に関する一考察
- ニューラルネットワークを応用した領域の併合法に関する一考察
- ニューラルネットワークを応用した領域の併合法に関する一考察
- 対話支援型問題解決システムにおける知識表現と推論方式
- 超音波センサと画像を用いたコーナー形状の認識
- 初等数学の問題解決過程における対話の文脈処理
- 問題解決および知識獲得過程における対話処理方式 : 図形操作との協調
- ドリルテキストを対象とした言語と図形の理解システムの実現
- ドリルテキスト理解システムの対話モジュールにおける発話条件
- 領域分割に関する一手法 : ニューラルネットワークの応用
- 領域分割に関する一手法 : ニューラルネットワークの応用
- マルチモーダル対話における発話文生成とジェスチャ生成に関する一考察 (特集テーマ・顔・表情・ジェスチャの認識・合成) -- (マルチモーダル)
- ニューラルネットワークを応用した領域の分割・併合法