MSD-HMMによる隠れ領域を考慮した手話動作のモデル化
スポンサーリンク
概要
- 論文の詳細を見る
動画像から手話を認識することは,センサー等の特殊な装置の使用やその身体的拘束を伴わない方法として有効であるが,撮像されている人物から手話の動作特徴を的確に取得する必要がある.しかし,手話動作において,両手が交差することなどよって特徴となる部位が隠れてしまう状況は避けられず,とくに単眼カメラの映像から手動作の軌跡を正確に抽出することは難しいと言える.しかし,そのような状況を回避するために,多数のカメラを用いることは先に述べた装置の特殊化にも繋がる点で問題である.本報告では,特徴部位が隠れることも手話動作の特徴としてとらえるという着想から,手話動作を表す特徴部位の可視状態と不可視状態が混在した一連の現象を説明することができるモデル化方法として,多空間分布に基づいた隠れマルコフモデル(multi-space distribution hidden Markov model: MSD-HMM)を適用した手法を提案する.手話単語データべースを用いた実験によって,MSD-HMMによるモデル化が機能していることを示し,単語認識実験によってその有効性を確認するとともに,今後の課題について述べる.
- 2010-03-05
著者
-
酒向 慎司
名古屋工業大学大学院工学研究科
-
北村 正
名古屋工業大学
-
酒向 慎司
名古屋工業大学
-
酒向 慎司
名古屋工業大学大学院工学研究科情報工学専攻
-
北村 正
名古屋工業大学工学部機械工学科
-
北村 正
名古屋工業大学大学院工学研究科
関連論文
- A-15-1 コード進行を用いた楽曲のモデル化と楽曲間の類似度に関する研究(A-15.ヒューマン情報処理,一般セッション)
- ストローク間の位置関係の文法記述に基づくオンライン手書き漢字認識(テーマセッション5(オンライン処理),文字・文書の認識・理解)
- 日本語歌詞からの自動作曲(音楽とOR)
- Orpheus : 歌詞の韻律に基づいた自動作曲システム(自動作曲)
- 声質と歌唱スタイルを自動学習可能な歌声合成システム(スペシャルセッション・歌情報処理2)
- 早口合成音声の聴取実験によるテキスト音声合成の評価(視覚障害/聴覚障害/一般)
- カラー成分間の相関を利用したカラー画像符号化手法の一検討
- 色変換によるカラー画像の符号化効率改善に関する一検討
- 第1回 HTSを用いた音声合成システムの構築
- A-15-2 クラシック音楽を対象としたGMMに基づく感性モデルに関する研究(A-15.ヒューマン情報処理,一般セッション)
- HMM音声合成に基づく音声認識率予測手法
- HMMに基づく人物や動作の多様性を考慮した手話認識手法(聴覚障害者支援ほか,福祉情報工学一般,地域におけるITサポート(シンポジウムテーマ))
- MSD-HMMによる隠れ領域を考慮した手話動作のモデル化
- HMMを用いた手話単語を構成するサブユニットの自動生成手法
- A-4-18 Total Variationフィルタを用いた異常環境電磁波の検出(A-4.信号処理,一般セッション)
- A-10-3 相互相関関数を用いた混合音の音高・楽器推定(A-10.応用音響,一般セッション)
- A-1-14 高次ΔΣ変調 A-D 変換器に用いるループフィルタの一設計法
- A-4-28 HMMに基づく日本手話認識のための特徴の統合に関する検討(A-4.信号処理,基礎・境界)
- D-12-121 日本手話認識に用いる特徴量の検討(D-12. パターン認識・メディア理解, 情報・システム2)
- D-12-29 アクティブ画像探索法を用いたHMMジェスチャー認識の特徴量抽出の検討(D-12. パターン認識・メディア理解, 情報・システム2)
- D-12-117 情報量基準に基づいたHMMジェスチャー認識の状態数の検討(D-12. パターン認識・メディア理解B)
- HMMに基づくテキスト音声合成への混合励振源モデルとポストフィルタの導入(音声,聴覚)
- 韻律生成HMMのための学習データ作成ツール
- HMM音声合成におけるスペクトル・ピッチへの固有声手法の適用
- HMMに基づく音声合成への混合励振源モデルとポストフィルタの導入
- HMM音声合成におけるスペクトル・ピッチへの固有声手法の適用
- HMMに基づく音声合成への混合励振源モデルとポストフィルタの導入
- HMMに基づく音声合成におけるスペクトル・ピッチ・継続長の同時モデル化(音声情報処理 : 現状と将来技術論文特集)
- 隣接ブロックを用いたDCT領域での高解像度化手法の高速化に関する一検討
- 高圧縮静止画像の高画質化に関する研究(研究速報,圧縮画像の画質改善,画像符号化・映像メディア処理)
- A-4-24 環境電磁波観測回路に用いるタイミング同期回路の開発(A-4.信号処理,一般講演)
- 逆ウェーブレット変換を用いた動画像高画質化に関する一検討
- 隣接ブロックを用いたDCT領域での解像度変換の高速化
- ケプストラム分析による大域・局所モデルを用いた異常環境電磁波の検出に関する一検討
- A-4-16 ケプストラム分析を用いた異常環境電磁波の検出(A-4.信号処理,一般講演)
- A-4-5 基本動作HMMに基づく手話単語認識手法(A-4.信号処理,一般講演)
- J_010 ウェーブレット変換を用いた動画像のブロックひずみ低減手法(J分野:グラフィクス・画像)
- A-4-6 隣接ブロックを用いたDCT係数上での解像度変換の有理数倍率への拡張に関する一検討(A-4.信号処理,一般講演)
- 逆ウェーブレット変換によるブロックひずみ低減手法
- 隣接ブロックを用いたDCT係数上での解像度変換
- JPEG・MPEGにおけるブロックひずみ低減手法の一検討
- ケプストラムに基づく雑音下のピッチ抽出法の改善
- 音声の動的特徴と付加雑音を用いる雑音下での単語音声認識
- ケプストラム合成音声の品質改善の一方法
- HMM音声合成システム(HTS)の開発(システム,第9回音声言語シンポジウム)
- HMM音声合成システム(HTS)の開発(システム,第9回音声言語シンポジウム)
- HMM音声合成システム(HTS)の開発(システム,第9回音声言語シンポジウム)
- 信頼度尺度に基づく音声認識誤りの検出および誤り訂正(合成, 韻律, 生成, 一般)
- パラメータ共有HMMに基づく音響信号からの自動和音認識の検討
- 視聴覚情報を用いた意図推定の為の決定木に基づく意図境界推定
- 楽譜を考慮した演奏者の統計的モデル化手法の改善と演奏者識別による評価
- 単旋律のパート分配によるアンサンブルのための自動編曲手法
- 楽譜情報のコンテキストクラスタリングに基づく演奏者のモデリング手法
- 声質と歌唱スタイルを自動学習可能な歌声合成システム(スペシャルセッション・歌情報処理2)
- HMMを用いた日変動パターンに基づく環境電磁波のモデル化と異常検出(信号処理,知的マルチメディアシステム,一般)
- HMMを用いた日変動パターンに基づく環境電磁波のモデル化と異常検出(信号処理,知的マルチメディアシステム,一般)
- 変分ベイズ法に基づく声質変換(音声合成・韻律,第9回音声言語シンポジウム)
- 変分ベイズ法に基づく声質変換(音声合成・韻律,第9回音声言語シンポジウム)
- 変分ベイズ法に基づく声質変換(音声合成・韻律,第9回音声言語シンポジウム)
- D-14-4 骨導音声を用いたGMMに基づく話者識別(D-14.音声,一般セッション)
- A-4-29 HMMを用いた日平均情報に基づく環境電磁波の異常放射検出(A-4.信号処理,一般セッション)
- A-4-30 GMMを用いたケプストラムの日平均情報に基づく環境電磁波の分析(A-4.信号処理,一般セッション)
- A-10-3 GMMに基づく演奏者の音楽的逸脱のモデル化(A-10.応用音響,一般セッション)
- D-12-51 雑音の影響による音声と画像のずれをモデル化したバイモーダル大語彙連続音声認識(D-12.パターン認識・メディア理解A(パターンメディアの認識・理解・生成),一般セッション)
- 日本手話の音韻構造を考慮したHMMに基づく手話認識(一般セッション,福祉と見守りのための画像・音声処理)
- 日本手話の音韻構造を考慮したHMMに基づく手話認識(一般セッション,福祉と見守りのための画像・音声処理)
- 日本手話の音韻構造を考慮したHMMに基づく手話認識(一般セッション,福祉と見守りのための画像・音声処理)
- H-028 GMMを用いた環境電磁波の異常検出と地震のエネルギーとの相関(画像認識・メディア理解,一般論文)
- AS-2-10 SOM上の環境電磁波の特徴(AS-2.電磁波地震予知における信号処理の新展開、評価技術,シンポジウム)
- A-4-23 手座標追跡によるジェスチャー認識
- HMM に基づく歌声合成のためのビブラートモデル化
- E-037 コード進行クラスタリングによる楽曲のモデル化と楽曲間類似度の評価(自然言語・音声・音楽,一般論文)
- D-12-124 手話単語認識のためのサブユニットHMMの自動生成(D-12.パターン認識・メディア理解B(コンピュータビジョンとコンピュータグラフィックス),一般セッション)
- A-10-4 環境電磁波のケプストラムを用いたベクトル量子化 : コードワードの解析(A-10.応用音響,一般セッション)
- K-019 手話単語を構成するためのサブユニットHMMの自動生成(教育工学・福祉工学・マルチメディア応用,一般論文)
- A-10-8 混合音の調波構造パターンとの相関による楽器・音高推定(A-10.応用音響,一般セッション)
- K-057 HMMに基づく手の動きと形状特徴のストリーム別クラスタリングを用いた手話認識手法(K分野:教育工学・福祉工学・マルチメディア応用,一般論文)
- F-22 HMM歌声合成における音韻・音高の同時モデル化(音楽情報科学(1),F.音声・音楽)
- HMMに基づく歌声合成のためのビブラートモデル化
- E-029 状態共有型HMMに基づく音楽音響信号からの自動和音認識の検討(E分野:自然言語・音声・音楽,一般論文)
- 5T-3 GMMに基づいた楽曲特徴と感性情報の対応関係のモデル化(音楽信号処理,学生セッション,人工知能と認知科学,情報処理学会創立50周年記念)
- 隠れマルコフモデルに基づいた歌声合成システム(音楽情報科学)
- 隠れマルコフモデルに基づいた歌声合成システム(音楽音響信号認識/生成2)
- K-15 HMMを用いたジェスチャー認識における混合数の検討(ヒューマンコミュニケーション基礎(2),K.ヒューマンコミュニケーション&インタラクション)
- HMMに基づいた視聴覚テキスト音声合成 : 画像ベースアプローチ(音声言語情報処理とその応用)
- 複合ウェーブレットモデルに基づく音声の分析合成(福祉と音声処理, 一般)
- 複合ウェーブレットモデルに基づく音声の分析合成(福祉と音声処理, 一般)
- 1T-4 単旋律のパート分配と伴奏・副旋律生成によるアンサンブルのための自動編曲手法(音楽分析・生成,学生セッション,人工知能と認知科学,情報処理学会創立50周年記念)
- E-015 発話文における意図識別に有効な音響特徴の検討(E分野:自然言語・音声・音楽,一般論文)
- ストローク単位の確率文脈自由文法を用いたオンライン手書き数式データベースの作成(テーマセッション4(数式),文字・文書の認識・理解)
- ストローク単位の確率文脈自由文法を用いたオンライン手書き数式認識(テーマセッション(3),文字認識・文書理解)
- ストローク単位の確率文脈自由文法を用いたオンライン手書き数式認識(テーマセッション(3), 文字認識・文書理解)
- 実世界環境における視聴覚情報を統合した擬人化対話エージェントシステムの検討
- 1T-7 任意の言葉の印象に合った楽曲生成についての検討(音楽分析・生成,学生セッション,人工知能と認知科学,情報処理学会創立50周年記念)
- CRFに基づく伴奏の演奏表現の予測モデルと協調演奏システム
- 手話の音韻構造に基づいたHMM手話認識の改善(聴覚障害ほか,視覚障害者支援,福祉情報工学一般)
- 確率的手法による歌唱曲の自動作曲 (「音楽制作と情報処理の友好関係」特集号)
- 多声MIDI演奏の楽譜追跡における演奏の即興性のモデル化と自動伴奏への応用
- 確率的手法による歌唱曲の自動作曲(音楽制作と情報処理の友好関係)
- E-028 任意の言葉による楽曲検索のための楽曲特徴量の自動選択(E分野:自然言語・音声・音楽)