複数画像特徴量を用いた読唇システム-オプテイカルフロー特徴・形状特徴・離散コサイン変換特徴の統合の検討-
スポンサーリンク
概要
- 論文の詳細を見る
本論文では,動画像から唇の情報を読み取り画像特徴のみを用いて会話の内容を認識する手法を述べる.画像による会話認識では、ノイズの影響が大きい車の中や,聴覚,視覚障碍者にも有益である.提案手法では,初めに顔と唇を含んだ動画像に Active Shape Model を適用し顔と唇領域の追跡を行う.追跡された唇から,オプティカルフロー,形状、離散コサイン変換といった唇の特徴を抽出する.抽出された特徴は階層型 SVM の中間層の SVM によって学習認識され,認識結果が最下層の SVM によって統合され最終認識結果となる.複数の画像特徴を用いることによって,認識結果が向上することが実験結果で示された.
- 2014-02-24
著者
関連論文
- 初期テンペラ絵画のディジタル表示法に関する検討 : 色彩復元と物質感表現保存の試み(映像メディア処理と一般)
- D-12-22 テンソル分解法に基づく画像処理による個人認証における画像特徴量の比較検討(D-12.パターン認識・メディア理解A(パターンメディアの認識・理解・生成),一般セッション)
- 影と非影領域に基づく画像コントラスト強調研究(映像符号化,システム及び一般)
- 逆S字型変換による濃淡画像のコントラスト強調手法(画像・映像処理)
- 2方向顔画像からのテーブルゲーム競技者の視線検出法に関する検討(グループコミュニケーション,HCGシンポジウム)
- A-15-18 テーブルゲーム時の競技者の顔画像からの視線検出法の検討(A-15.ヒューマン情報処理,一般セッション)
- 顔面筋動作に基づく形状変形とテクスチャの張替えによる三次元人物顔画像の再構築(画像認識, コンピュータビジョン)
- A-16-31 台本のト書きの分析結果を利用したサイバーシアター・ディレクティング・システム
- D-12-16 テンソル分解法に基づくHOG特徴量を用いた人物の動作認識手法の検討(D-12.パターン認識・メディア理解,一般セッション)
- 色相に着目した灰色仮説に基づく照明光推定法の一提案
- D-12-15 色分け衣服を用いた動画像からの人物姿勢推定法の検討 : パーティクルフィルタにおける"'溢れ現象"を利用した人体パーツ追跡法の提案(D-12.パターン認識・メディア理解,一般セッション)
- 色分け衣服を用いた動画像からの人物姿勢推定のための人体パーツ追跡法の検討 : パーティクルフィルタによるオクルージョン判定法の検討(追跡・検出,視覚情報処理,画像メディア処理・符号化,一般)
- D-12-17 移動カメラ画像からの手振り動きの検出と認識モデルの構築(D-12.パターン認識・メディア理解,一般セッション)
- 移動カメラ動画像からのCondensation Algorithmを用いた手振り認識の検討(テーマ関連セッション1)
- D-12-7 移動カメラ画像からの人物追従局所座標による手振り軌跡の検出法(D-12. パターン認識・メディア理解,一般セッション)
- 移動カメラ動画像からのCondensation Algorithmを用いた手振り認識の検討(テーマ関連セッション1,三次元画像,多視点画像)
- 移動カメラ動画像からのCondensation Algorithmを用いた手振り認識の検討(テーマ関連セッション1,三次元画像,多視点画像)
- H-008 動的カメラ画像からの動物体追跡のためのロボットプラットフォームの検討(H分野:画像認識・メディア理解)
- パン・ティルト・カメラにより獲得される動画像からのカメラの回転パラメータの推定法に関する検討 : 動物体を含む撮像シーンからのロバストな推定法の検討(追跡・検出,視覚情報処理,画像メディア処理・符号化,一般)
- O-028 視覚次元互動システム : 対話的な展示支援システムに関する提案(O.情報システム)
- サイバーシアターにおいて多数の観客アバターが存在する場合の演技者と観客との間の観客効果に関する基礎的検討(複合現実感,仮想都市)
- A-16-19 形状変形とテクスチャ張り替えを用いた3次元人物顔再構築法(A-16. マルチメディア・仮想環境基礎)
- 2枚の実写画像による顔面筋動作を考慮した3次元顔特徴モデルの構築法
- 2枚の実写画像による顔面筋動作を考慮した3次元顔特徴モデルの構築法
- 2枚の実写画像による顔面筋動作を考慮した3次元顔特徴モデルの構築法
- A-16-35 筋肉動作を考慮した3次元顔モデルの構築と表現生成の応用
- D-11-75 3D顔モデル生成方法の比較検討
- 線画映像を用いてプライバシー保護に配慮したビジュアルサポートシステム
- 5Y-2 自動会話システムにおけるフォントによる感情表現の効果(コミュニケーション支援,学生セッション,インタフェース)
- I-037 テクスチャマッピング制御による立体感強調の基礎的検討(I分野:グラフィクス・画像,一般論文)
- 文化財環境における遍在型デジタルアーカイブ研究 : 非接触型ICチップ/タグを利用した、文化財環境でのユビキタス・アーカイブの実現について
- K-30 Field Augmented Reality実現のための絶対位置・方位測定方法の検討(マルチメディア・仮想環境基礎1,K.ヒューマンコミュニケーション&インタラクション)
- モンテカルロ法とベイズ推定に基づく動的カメラからの三次元形状復元を利用したカメラの移動方向評価尺度に関する検討(一般セッション9)
- D-12-36 移動カメラ画像からの3次元物体形状復元におけるカメラの移動方向評価尺度に関する検討(D-12. パターン認識・メディア理解,一般セッション)
- モンテカルロ法とベイズ推定に基づく動的カメラからの三次元形状復元を利用したカメラの移動方向評価尺度に関する検討(一般セッション3,三次元画像,多視点画像)
- モンテカルロ法とベイズ推定に基づく動的カメラからの三次元形状復元を利用したカメラの移動方向評価尺度に関する検討(一般セッション3,三次元画像,多視点画像)
- H-056 カメラの上下動を考慮するモンテカルロ法とベイズ推定に基づく物体の三次元形状復元法の検討(H分野:画像認識・メディア理解)
- D-12-57 移動カメラを用いるベイズ更新に基づく逐次的3次元形状復元法の検討 : 特徴点の追跡が不要な方法の提案と基礎的検討(D-12.パターン認識・メディア理解,一般講演)
- K-029 サイバーシアターの空間移動ディレクション装置の提案(K分野:ヒューマンコミュニケーション&インタラクション)
- 1ZG-6 "●"プロンプタを用いるコミュニケーションシステムにおけるメッセージ表現の分析(コミュニケーション支援,学生セッション,インタフェース,情報処理学会創立50周年記念)
- 5Y-3 "●"プロンプタを用いるコミュニケーションシステムにおける表現特性の分析(コミュニケーション支援,学生セッション,インタフェース)
- ICME2001, マルチメディアに関する国際会議と展示
- 身体動作解析による感情要素の抽出に関する考察
- 対比刺激を用いた視聴覚相互作用の予備的検討(ヒューマンコミュニケーショングループ(HCG)シンポジウム)
- A-15-19 視聴覚相互作用の予備的検討(A-15. ヒューマン情報処理)
- 周波数解析に基づいた、テクスチャ画像の材質感解析手法の検討(感性情報処理および一般)
- K-20 3Dテクスチャ画像の材質感解析(ヒューマン情報処理(1),K.ヒューマンコミュニケーション&インタラクション)
- H-020 移動物体を含む環境における移動ステレオカメラの姿勢推定と空間の3次元復元の検討(H分野:画像認識・メディア理解,一般論文)
- I-72 3方向光源差分画像を用いた古銭画像識別法の検討(物体認識,I.画像認識・メディア理解)
- 局所コントラストと距離情報による立体感コントラスト強調法の検討(センサネットワーク,Webにおける映像メディア処理,応用及び一般)
- 局所コントラストと距離情報による立体感コントラスト強調法の検討(センサネットワーク,Webにおける映像メディア処理,応用及び一般)
- 距離情報に基づく画像コントラスト強調(一般セッション4,三次元画像,多視点画像)
- 距離情報に基づく画像コントラスト強調(一般セッション4,三次元画像,多視点画像)
- ウェーブレット分析に基づくカラー画像強調研究(一般セッション2)
- エッジ方向特徴とA Modified RANSACによる楕円認識および医療画像工学への応用(抽出,映像符号化,システム及び一般)
- D-12-57 スポーツ映像において高速に移動するボールを検出する方法の基礎的検討(D-12. パターン認識・メディア理解,一般セッション)
- H-029 色分け衣服を用いた人物の姿勢推定法における人体パーツ追跡法の基礎的検討(画像認識・メディア理解,一般論文)
- I-002 A System that Allows Human Hand's Short Range Movements to Point a Virtual Object in a Large Screen by Tracking the Hand by Computer Vision Based Approach
- H-030 テンソル分解に基づく多視点映像を用いた人物の動作認識の一検討(H分野:画像認識・メディア理解,一般論文)
- G-017 脳のMRJ画像の領域分割のための改良KFCMアルゴリズム(G分野:生体情報科学,一般論文)
- 2ZF-2 輪郭映像を用いた会話システムにおける顔注視行動の分析(入出力インタフェース,学生セッション,インタフェース,情報処理学会創立50周年記念)
- 創造的思考を用いたコミュニケーション方法 : "●"プロンプタ・システムでの実用について(一般,顔・人物・ジェスチャ・行動)
- 創造的思考を用いたコミュニケーション方法 : "●"プロンプタ・システムでの実用について(一般,顔・人物・ジェスチャ・行動)
- D-12-87 動物体を含むパン・ティルト映像からのカメラ回転角の推定の検討(D-12.パターン認識・メディア理解,一般セッション)
- D-11-52 パーリンノイズ地形レイはGPUにレイキャスティング(D-11.画像工学,一般セッション)
- A-16-9 C.O.T.O. : A Multimedia Choreography System Inspired by Butoh-fu
- 動的計画法による実時間ステレオ
- A-14-12 顔の特徴を分類化および言語表現可能とした似顔絵システム : デフォルメ似顔絵自動生成システム:ACGS(A-14. ヒューマンコミュニケーション基礎,一般セッション)
- J-005 顔認識における二重符号化理論とデフォルメ似顔絵との関連性について : コンピュータによる似顔絵生成への応用(J分野:ヒューマンコミュニケーション&インタラクション)
- A-14-10 分析的記憶表象領域における顔記憶の階層的構造とそのコンピュータシミュレーション : デフォルメ似顔絵自動生成システムへの応用(A-14.ヒューマンコミュニケーション基礎,一般講演)
- K_008 分析的記憶表象領域における顔記憶の階層的構造とそのコンピュータシミュレーション : デフォルメ似顔絵自動生成システムへの応用(K分野:ヒューマンコミュニケーション&インタラクション)
- 顔の特徴を分類化および言語表現可能とした似顔絵システムの検討(メディア処理・コンテンツ生成,ヒューマンコミュニケーショングループ(HCG)シンポジウム)
- A-15-4 顔の特徴を分類化および言語表現可能とした似顔絵システムの提案(A-15.ヒューマン情報処理,一般講演)
- K-065 顔認識における二重符号化理論とデフォルメ似顔絵との関連性について : コンピュータによる似顔絵生成への応用(K分野:ヒューマンコミュニケーション&インタラクション)
- I-056 複数カメラを用いたMotion Signatureに基づく人物のトラッキングの検討(グラフィクス・画像,一般論文)
- テンソル分解に基づく人物の歩行動作を用いた個人認証(一般セッション2,移動カメラ画像処理におけるパターン認識とメディア理解)
- H-043 シルエット特徴量のテンソル分解に基づく動画像から人物の動作認識手法の検討(画像認識・メディア理解,一般論文)
- 互いに類似した動作のテンソル分解に基づく動画像からの認識法の検討(センサネットワーク,Webにおける映像メディア処理,応用及び一般)
- 互いに類似した動作のテンソル分解に基づく動画像からの認識法の検討(センサネットワーク,Webにおける映像メディア処理,応用及び一般)
- O-009 画像処理を用いた店舗内の顧客の商品選定時における態度の認識手法の一考察(O分野:情報システム)
- D-12-123 観察法に基づく画像処理を用いた顧客の行動認識手法の一考察(D-12.パターン認識・メディア理解,一般講演)
- 伸縮を含む対話的変形操作が可能な多関節三次元弾性物体モデル(サイバーワールド論文)
- J_019 多関節弾性物体モデルのための計算コストと使用メモリ削減法の検討(J分野:グラフィクス・画像)
- 店舗内における顧客の行動認識方法の基礎的検討 : 人物の介入するフレームの検出と色情報を用いた人物と物体との接触確認(映像符号化,システム及び一般)
- D-12-126 弾性物体のように振舞うキャラクターモデルの構築法(D-12.パターン認識・メディア理解,一般講演)
- 6ZB-1 顔の輪郭画像を用いた会話システムにおける視覚特性(視線・顔検出・脳計測,学生セッション,インターフェース)
- 線画によるデフォルメ映像を用いた遠隔サポートの会話特性
- 線画によるデフォルメ映像を用いた遠隔サポートの会話特性(コミュニケーション支援及び一般)
- 線画によるデフォルメ映像を用いた遠隔サポートの会話特性(コミュニケーション支援及び一般)
- デフォルメ映像を用いた遠隔サポートのコミュニケーション(一般,言語・非言語コミュニケーション及び一般)
- デフォルメ映像通信を用いた初心者ユーザの遠隔サポート
- D-12-88 視覚障害者の歩行支援のための動的動画像からのパーティクルフィルタを用いた白線追跡法の検討(D-12.パターン認識・メディア理解,一般セッション)
- パーティクルフィルタによる白線追跡のためのパラメータの検討 : 視覚障害者の歩行支援のための人物装着型カメラにより獲得される動画像からの白線認識法の検討(聴覚と福祉情報工学,一般)
- 複数画像特徴量を用いた読唇システム-オプテイカルフロー特徴・形状特徴・離散コサイン変換特徴の統合の検討-
- 映像合成のためのRGB画像からの3次元復元結果とDepth画像との比較による光源方向推定法に関する研究(一般,メディア・コミュニケーションの品質と福祉,及び一般)
- 映像合成のためのRGB画像からの3次元復元結果とDepth画像との比較による光源方向推定法に関する研究(一般,メディア・コミュニケーションの品質と福祉,及び一般)
- D-11-77 RGB画像からの3次元復元結果とDepth画像との比較による光源位置推定法に関する基礎的検討(D-11.画像工学)
- 映像合成のためのRGB画像からの3次元復元結果とDepth画像との比較による光源方向推定法に関する研究(一般,メディア・コミュニケーションの品質と福祉,及び一般)
- 映像合成のためのRGB画像からの3次元復元結果とDepth画像との比較による光源方向推定法に関する研究(一般,メディア・コミュニケーションの品質と福祉,及び一般)
- D-12-68 オプティカルフロー特徴と形状特徴に離散コサイン変換特徴を組み合わせる動画像からの読唇法の検討(D-12.パターン認識・メディア理解B(コンピュータビジョンとコンピュータグラフィックス),一般セッション)