オプティカルフローによる手話の大局的動作の認識について
スポンサーリンク
概要
- 論文の詳細を見る
動画像からの手の大局的動作の抽出と認識について報告する.日本手話は,様々な身体器官を用いて表現される複雑な視覚言語であり,実時間での対話が可能である.我々は大局的特徴が手話表現の理解を助けているという仮説を立て,大局的特徴のみを用いた手話文認識や,大局的特徴と状況情報を利用した手話文認識を行って,その有効性について検討してきた.本報告では,オプティカルフローを用いた動画像からの手動作の抽出と,それを元にした動作の認識について述べる.動画像から推定したオプティカルフローを元に,手動作の動きの方向を値としてもつ2次元パターンを作成し,2次元パターンから特徴量を抽出してDPマッチングを行い,91.3%の一位正解率を得た.
- 社団法人電子情報通信学会の論文
- 2002-09-12
著者
-
市川 熹
千葉大学
-
市川 熹
千葉大学大学院自然科学研究科
-
堀内 靖雄
千葉大学大学院融合科学研究科
-
市川 熹
千葉大学 工学部
-
岡澤 裕二
千葉大学大学院自然科学研究科
-
堀内 靖雄
千葉大学大学院 融合科学研究科 情報科学専攻
関連論文
- パネル討論 : 音声言語関連大型プロジェクトの現状と将来
- ヒューマンインタフェースシンポジウム2007報告
- F_0モデルによるアクセント句のセグメンテーションの検討(感情音声,韻律,声質,音声生成・知覚,脳機能,一般)
- 1.情報福祉と音声(バリアフリー社会に向けた音声情報処理)
- 視覚障害者のウェブサイトの検索行動に関する考察(福祉と音声処理,一般)
- 福祉と音声研究者
- 視覚障害者のウェブサイトの検索効率と心的負担に関する考察(ヒューマンコミュニケーショングループ(HCG)シンポジウム)
- 視覚障害者のアクセシビリティを考慮した Web ページ作成のためのビルダの検討
- 視覚障害者のアクセシビリティを考慮したWebページ作成のためのビルダの検討(特定領域研究「情報福祉の基礎」)
- 6.コミュニケーションと障害者(コミュニケーション支援)
- 3DCGによる手話文アニメーション合成システムの構築と評価(福祉と知能・情動・認知障害,福祉と音声処理,一般)
- 多目的利用分散型学術成果データベースシステムの構成法(オフィスインフォメーションシステム及び一般)
- 日本語地図課題対話コーパスの設計と特徴
- 福祉情報工学研究会10周年を記念して : 設立の経緯と情報福祉研究開発への期待(WIT10周年・50回記念企画「未来へつなぐ」プログラム)
- 日本手話の後続うなずきの機能に関する検討(福祉情報工学一般)
- ブレスの合図を認識する伴奏システムの実装と評価(システム)
- 視覚障害者のウェブサイトの検索行動に関する考察(福祉と音声処理,一般)
- 高齢者・障害者支援とバリアフリー技術の動向
- 音声の非言語情報の知覚・認知モデルの検討 : 感情認知過程を説明する階層モデル(聴覚・音声・言語とその障害,一般)
- 音声対話システムにおける発話予測を利用した音声認識
- 手話日本語間の自動翻訳とその周辺
- 指点字の強度と時間構造におけるプロソディ情報の分析(福祉情報工学一般)
- 3DCGによる手話文アニメーション合成システムの構築と評価(福祉と知能・情動・認知障害,福祉と音声処理,一般)
- 3DCGによる手話文アニメーション合成システムの構築と評価(福祉と知能・情動・認知障害,福祉と音声処理,一般)
- 書き起こしへの付与を目指した音声とテキストを対象とした発話印象の分析
- ブレスによる合図を検出する伴奏システム
- 発言権を考慮した指点字と文字による会議システムの構築(視聴覚補助,情報福祉論文)
- 指点字を利用した盲聾者用エディタの開発(福祉と言語処理/一般)
- 指点字を利用した盲聾者用エディタの開発(福祉と言語処理/一般)
- 複数のモデルを利用した重回帰分析による演奏表現の学習
- 韻律からの文構造推定における局所的特徴の分析 (テーマ:一般)
- 動作要素の時間的関係を考慮した手話認識方式の検討
- 話者交替における視線とうなずきの分析 (テーマ:一般)
- 音声対話コーパスにおける画像情報のアノテーション手法の検討
- 時間的差分学習に基づく環境適応による音声認識(Session-7 スペシャルセッション(ポスター): 共通コーパスを利用した耐雑音技術評価, 第7回音声言語シンポジウム)
- 時間的差分学習に基づく環境適応による音声認識(Session-7 スペシャルセッション(ポスター): 共通コーパスを利用した耐雑音技術評価, 第7回音声言語シンポジウム)
- 時間的差分学習に基づく環境適応による音声認識(Session-7 スペシャルセッション(ポスター): 共通コーパスを利用した耐雑音技術評価, 第7回音声言語シンポジウム)
- 強化学習を用いた環境適応とクラスタリングに基づく音声認識
- LG-003 強化学習に基づくオンライン逐次環境適応による雑音下音声認識(G. 音声・音楽)
- 手話における手動作のモデル化に基づくCGアニメーションの生成(福祉と知能・認知障害/一般)
- 手話における手動作のモデル化に基づくCGアニメーションの生成(福祉と知能・認知障害/一般)
- 発話末の基本周波数とパワーのパターン分類とその分析
- 伴奏システムでのブレス情報利用に関する検討
- 抑揚情報による木構造の準実時間推定
- 先行発話断片の終端部分に存在する次発話者に関する言語的・韻律的要素について
- 自発的音声対話における話者交替の制御に関わる発話末の統語的・韻律的特徴
- 日本手話におけるうなずきと接続詞の分析(福祉と音声処理,一般)
- 日本手話におけるうなずきと接続詞の分析(福祉と音声処理,一般)
- 統計的解析から見た日本手話手指動作・非手指動作の相関関係について
- 指点字会議システムの試作(視覚障害/聴覚障害/一般)
- K-017 全盲者のウェブサイトのユーザビリティと検索効率に関する考察(教育工学・福祉工学・マルチメディア応用,一般論文)
- 発話予測を利用した手話対話システムに関する検討(福祉と知能・情動・認知障害,福祉と音声処理,一般)
- 発話予測を利用した手話対話システムに関する検討(福祉と知能・情動・認知障害,福祉と音声処理,一般)
- 発話予測を利用した手話対話システムに関する検討(福祉と知能・情動・認知障害,福祉と音声処理,一般)
- STRAIGHTを用いたF0モデルパラメータの変換・再合成ツールの開発(一般(ポスターセッション),第9回音声言語シンポジウム)
- STRAIGHTを用いたF0モデルパラメータの変換・再合成ツールの開発(一般(ポスターセッション),第9回音声言語シンポジウム)
- STRAIGHTを用いたF0モデルパラメータの変換・再合成ツールの開発(一般(ポスターセッション),第9回音声言語シンポジウム)
- F0モデルを用いた日本語対話における韻律と話者交替の分析(合成,生成,韻律,一般)
- 音声対話におけるN-gramと予測文を併用した対システム発話の判別(合成,生成,韻律,一般)
- インタラクティブ性を考慮したウェブアクセシビリティの可能性の検討
- インタラクティブ性を考慮したウェブアクセシビリティの可能性の検討
- 人間の伴奏制御モデルに基づく伴奏システムの実装と評価
- 手話共通データSigndexの概念とその実例 : Signdex V.1
- 単語の時間構造を考慮した手話CGアニメーションの生成(福祉と知能・認知障害/一般)
- 単語の時間構造を考慮した手話CGアニメーションの生成(福祉と知能・認知障害/一般)
- メトロノームを利用した手話の時間構造の分析(ヒューマンコミュニケーショングループ(HCG)シンポジウム)
- 手話CGアニメーションにおける自然な手動作の生成
- 予測文と音素認識の併用による発話の予測内外判定に関する検討(インタフェース)
- 心的負荷状況における車載情報機器のための音声対話戦略の分析(第8回音声言語シンポジウム)
- 心的負荷状況における車載情報機器のための音声対話戦略の分析(Session-4 一般(ポスターセッション),第8回音声言語シンポジウム)
- 心的負荷状況における車載情報機器のための音声対話戦略の分析(Session-4 一般(ポスターセッション),第8回音声言語シンポジウム)
- 日本手話における首動作の解析(福祉情報工学と画像処理、一般)
- イントネーションからの構文構造の決定
- 合奏時の人間の演奏制御の分析・推定(音楽情報科学)
- 人間同士の合奏データによる人間の演奏制御の分析
- 合奏における人間の発音時刻制御モデルの推定(音楽情報科学)
- 自然手話対話における話者交替現象の分析(視覚障害/聴覚障害/一般)
- 自然手話対話における話者交替に関する予備的検討(分析、生成と評価)(音声とコミュニケーション及び一般)
- 視覚障害者のための意味情報に基づく仮名漢字変換(高齢者支援/肢体不自由者支援/一般)
- 人間同士の合奏データによる人間の演奏制御の分析
- 手話対話における頷きの影響に関する実験的検討
- 手話対話における頷きの影響に関する実験的検討
- わたり区間を含む単位を用いた手話認識手法の検討(ヒューマンコミュニケーショングループ(HCG)シンポジウム)
- 情報福祉論文特集の発行にあたって
- 日本手話の文意と韻律
- 音声対話システムにおける音素認識に基づく予測文候補の絞込み(第8回音声言語シンポジウム)
- 予測文と部分単語認識の併用による音声対話システムの検討(第8回音声言語シンポジウム)
- 音声対話システムにおける音素認識に基づく予測文候補の絞込み(Session-4 一般(ポスターセッション),第8回音声言語シンポジウム)
- 予測文と部分単語認識の併用による音声対話システムの検討(Session-3 コミュニケーション・対話,第8回音声言語シンポジウム)
- 音声対話システムにおける音素認識に基づく予測文候補の絞込み(Session-4 一般(ポスターセッション),第8回音声言語シンポジウム)
- 予測文と部分単語認識の併用による音声対話システムの検討(Session-3 コミュニケーション・対話,第8回音声言語シンポジウム)
- 遺伝的アルゴリズムによるF0モデルパラメータ推定手法と話者交替分析への適用(一般)
- 日本手話対話の話者交替に関する手話言語の特徴
- 音声対話での話者交替/継続の予測における韻律情報の有効性
- ディジタル符号化された手話動画像の品質評価について(マルチメディア処理)
- 盲聾者用アプリケーションにおけるアクセシビリティとユーザビリティの検討(福祉と知能・認知障害/一般)
- 盲聾者用アプリケーションにおけるアクセシビリティとユーザビリティの検討(福祉と知能・認知障害/一般)
- 福祉情報工学とは何か (特集 ことばのバリアフリー--情報デバイドの解消をめざして)
- 対話音声を対象とした韻律情報による発話印象のモデル化(Session-3 対話・コミュニケーション, 第7回音声言語シンポジウム)
- 対話音声を対象とした韻律情報による発話印象のモデル化(Session-3 対話・コミュニケーション, 第7回音声言語シンポジウム)