モーションキャプチャと音楽情報を用いた舞踊動作解析手法(顔・身体動作認識, <特集>画像の認識・理解論文)
スポンサーリンク
概要
- 論文の詳細を見る
舞踊等を代表とする無形文化財(人の動き情報)のディジタル保存及び動きの解析手法について述べる. 日本の伝統舞踊や匠の技といった無形文化財は人から人へ継承することで保存, 伝承されてきた. しかし近年では, 後継者の減少などに伴い散逸が起こりつつあるため, それらをアーカイブ化する技術の開発が急務となっている. そこで, 我々はモーションキャプチャシステムを用いて人の動きをディジタル化し, 舞踊動作を直接解析することにより有限個の動作プリミティブを抽出することで, この問題に対処することを考えた. 動作プリミティブとは動きを構成する最小単位を意味し. 本論文では従来の手足の速度や関節角の角速度のみを用いた手法に加え, 音楽を考慮した動作解析手法を提案する. これは, 舞踊が音楽に合わせて身体を動かすものであるという性質をもつことに由来する. 本論文では音響信号からビートトラッキングを行い, そのリズムに基づいて舞踊動作中からキーポーズを抽出し, セグメンテーションによって動作プリミティブを求める手法を説明し, 最後に実験結果を示しその有効性について論じる.
- 2005-08-01
著者
-
中澤 篤志
大阪大学サイバーメディアセンター
-
池内 克史
東京大学生産技術研究所
-
白鳥 貴亮
東京大学生産技術研究所
-
白鳥 貴亮
Carnegie Mellon University
-
白鳥 貴亮
Disney Reserch Pittsburgh
関連論文
- 層状表面におけるスパイダーモデルを用いた複雑反射の要素分解
- 株式会社アスカラボ : 複合現実感技術を用いた文化財復元展示への取組み
- IEEE Computer Society Conference on Computer Vision and Pattern Recognition (CVPR2008)報告(会議報告,アンビエント環境知能)
- IEEE Computer Society Conference on Computer Vision and Pattern Recognition (CVPR2008)報告(会議報告,アンビエント環境知能)
- IEEE Computer Society Conference on Computer Vision and Pattern Recognition (CVPR2008)報告(会議報告)
- 眼球の表面反射を用いたディスプレイ・カメラキャリブレーション(幾何学的解析・最適化,画像の認識・理解論文)
- 画像ノイズの分散を用いたデモザイキングアルゴリズムの推定(光学的解析・画質改善,第12回画像の認識・理解シンポジウム推薦論文,画像の認識・理解論文)
- 車載全方位ビデオ映像を用いたイメージベースレンダリングによるドライビングシミュレータの提案(テーマセッション1(広域空間センシング関連),実世界センシングとその応用)
- 非剛体位置合わせ手法による古鏡の解析(一般セッション8)
- 非剛体位置合わせ手法による古鏡の解析(一般セッション8,CV/PR技術のVRへの応用)
- 符号付距離場を用いたSAI法の高速化・頑健化と形態解析への応用(一般セッション1)
- 符号付距離場を用いたSAI法の高速化・頑健化と形態解析への応用(一般セッション,事例ベースメディア解析)
- 時変イントリンシック画像とビデオサーベイランスへのその応用(画像処理,画像パターン認識)
- 時空間Markov Random Fieldモデルによる隠れにロバストなトラッキングアルゴリズム
- 移動物体が存在する環境下での背景画像の合成と評価
- 5M-11 交差点における交通事象把握
- 隠れマルコフモデルを応用した交差点における事故検出
- 五輪招致プレゼン用MRシステムの開発
- サブピクセル推定を用いた全方位ステレオ視による高精度な6自由度SLAM(テーマセッション2(3次元センシング関連),実世界センシングとその応用)
- 大規模距離画像の並列統合手法の効率化とその評価(一般セッション6,コンピュータビジョンとパターン認識のための学習理論)
- 時系列高さ画像を用いた車載カメラ画像と建物モデル間の対応付け及びテクスチャマッピング手法の提案(ITS画像処理,映像メディア及び一般)
- 全方位因子分解法を用いた車両運動の高精度推定法(ITS画像処理,映像メディア及び一般)
- 時系列高さ画像を用いた車載カメラ画像と建物モデル間の対応付け及びテクスチャマッピング手法の提案(車載カメラ,ITS画像処理,映像メディア及び一般)
- 全方位因子分解法を用いた車両運動の高精度推定法(車載カメラ,ITS画像処理,映像メディア及び一般)
- 実画像合成ドライビングシミュレータ
- D-12-82 画像列の対応関係を用いた全方位画像列の位置姿勢推定手法の提案(D-12. パターン認識・メディア理解,一般セッション)
- 車載レーザセンサによる住宅地図の高精度三次元化手法
- 研究速報「複数カメラ画像の統合による揺れの無い全方位画像列の生成手法」
- 研究速報「バーチャル飛鳥京:複合現実感による遺跡の復元と観光案内システムへの展開」
- 研究速報「動的計画法を利用した市街地の住宅地図と実体形状の統合化」
- 研究速報「ユーザ参加型の視覚情報統合による交差点仮想鳥瞰図の合成」
- D-11-96 球面時空間画像解析による揺れの無い全方位画像列の生成手法(D-11.画像工学D(画像処理・計測),一般講演)
- 動画像の時空間解析に基づく都市空間のモデル化とその応用(複合現実感,仮想都市,及び一般)
- Normalized Cut法を用いた分光情報に基づく色復元
- 第10回コンピュータビジョン国際会議ICCV2005報告(会議報告)
- 第10回コンピュータビジョン国際会議ICCV2005報告(会議参加報告,CVのためのパターン認識・学習理論の新展開)
- レーザーレンジデータとGoogle Maps画像の位置合わせを用いた三次元都市環境のモデリング(テーマセッション1(広域空間センシング関連),実世界センシングとその応用)
- レーザーレンジデータとGoogle Maps画像の位置合わせを用いた環境のモデリング(テーマセッション4,アンビエント環境知能)
- レーザーレンジデータとGoogle Maps画像の位置合わせを用いた環境のモデリング(テーマ関連セッション4)
- 眼球の表面反射を用いたディスプレイカメラキャリブレーション(テーマ関連セッション,手,顔,身体表現の認識,理解)
- 確率的手法を用いた車両の検出とクラス認識(画像認識,コンピュータビジョン)
- CGモデル画像による教師画像を利用した確率的車種認識手法
- CGモデル画像による教師画像を利用した確率的車種認織手法
- 移動カメラによる時空間画像を用いた車両からのスペキュラ除去
- 全方位画像を用いた広域環境の自由視点レンダリング
- MMM-Classification法によるレンジデータの認識 (ヒューマン情報処理)
- 複数シーンの連結によるインタラクティブ三次元ビデオ(基礎/応用,サイバーワールド論文)
- Boostingを用いたボリュームデータからの人体姿勢推定(一般セッション,手,顔,身体表現の認識,理解)
- Diskless Linuxを用いた情報教育システムの開発とその評価(分散システム構築運用技術,新しいパラダイムの中での分散システム/インターネット運用・管理)
- D-12-46 3次元Huモーメント不変量を用いた時系列ボリュームデータの圧縮法(D-12.パターン認識・メディア理解,一般講演)
- キーポーズを用いた舞踊動作の低次元化表現(アニメーション1(人体動作),アニメーション及びCG一般)
- 高等教育機関における次世代コース管理システムの構築に向けて(学習オブジェクト・学習データの活用と集約)
- 移動ロボットによる災害地の三次元再構築のためのポテンシャル場を用いた経路計画(一般セッション,文字認識・文書理解)
- 材質感モデルの自動生成(一般セッション(2))
- D-12-88 レーザセンサと単眼カメラを用いた台車型3次元計測センサ(D-12.パターン認識・メディア理解,一般セッション)
- 眼球の表面反射を用いたディスプレイ・カメラキャリブレーション(テーマ関連,顔・人物・ジェスチャ・行動)
- 眼球の表面反射を用いたディスプレイ・カメラキャリブレーション(テーマ関連,顔・人物・ジェスチャ・行動)
- 音楽に合った舞踊動作の自動生成
- 音楽に合った舞踊動作の自動生成
- 音楽特徴を考慮した舞踊動作の自動生成(マルチメディア応用,画像の認識・理解論文)
- MMM-Classfication法によるレンジデータの認識(一般,顔・人物・ジェスチャ・行動)
- MMM-Classfication法によるレンジデータの認識(一般,顔・人物・ジェスチャ・行動)
- Boostingを用いたボリュームデータからの人体姿勢推定(テーマ関連セッション2)
- 分散メモリシステムにおける大規模距離画像の並列同時位置合わせ手法(画像情報)
- PCクラスタによる大規模距離画像の並列アライメント
- 大規模観測対象のための幾何および光学情報の統合
- モーションキャプチャと音楽情報を用いた舞踊動作解析手法(顔・身体動作認識, 画像の認識・理解論文)
- 印象語による舞踊動作データの分類法
- 印象語による舞踊動作データの分類法
- 脚タスクモデルを用いた2足歩行ヒューマノイドロボットによる人の舞踊動作の再現
- モーションキャプチャによる全身運動解析と模倣ロボット : 「じょんがら」節をHRP-1Sに踊らせる(テーマ関連/オーガナイズドセッション(2))
- 民俗芸能のデジタルアーカイブとロボットによる動作提示
- シンボリックな動作記述を用いた舞踊動作模倣ロボットの実現
- シンボリックな動作記述を用いた舞踊動作模倣ロボットの実現(PRMU&NCテーマセッション(4) : 模倣学習)(認識と学習,模倣学習)
- シンボリックな動作記述を用いた舞踊動作模倣ロボットの実現(PRMU&NCテーマセッション(4) : 模倣学習)(認識と学習,模倣学習)
- 複数舞踊動作からの個性の抽出および適用
- 舞踊模倣ヒューマノイドロボットにおける脚動作の認識と生成
- 眼球の表面反射を用いたディスプレイカメラキャリブレーション(テーマ関連セッション,手,顔,身体表現の認識,理解)
- インデックス画像を用いた複数距離画像の高速同時位置合せ(画像認識, コンピュータビジョン)
- 特集「街を観る」の発行に寄せて
- D-11-78 3Dレンジデータによる災害状況認識(D-11.画像工学,一般セッション)
- 印象語による舞踊動作データの分類法
- レーザーレンジデータとGoogle Maps画像の位置合わせを用いた環境のモデリング(テーマセッション4,アンビエント環境知能)
- 単一画像からの光源位置・色と表面反射特性の推定(画像の認識と理解)
- 移動ロボットによる災害地の三次元再構築のためのポテンシャル場を用いた経路計画(一般セッション,文字認識・文書理解)
- 記念セッション2 : 亜洲の芸術科学
- 人の動きのデジタル化とその応用--モーションキャプチャと音楽情報を利用した舞踊動作の解析と生成
- ユビキタス環境下での次世代コース管理システム
- センサ内蔵人形を用いたモーションキャプチャデータの検索手法
- センサ内蔵人形を用いたモーションキャプチャデータの検索手法
- 観察学習パラダイムに基づく二足歩行ヒューマノイドロボットによる舞踊動作の再現 (特集:身体と運動の進化)
- JST-1 観察に基づく文化遺産のデジタル保存(大型プロジェクト紹介,学術系企画)
- 観察に基づく文化遺産のデジタル保存
- センサ内蔵人形を用いた大規模モーションキャプチャデータの検索手法(テーマセッション,時系列パターン認識)
- センサ内蔵人形を用いた大規模モーションキャプチャデータの検索手法(テーマセッション,時系列パターン認識)
- センサ内蔵人形を用いた大規模モーションキャプチャデータの検索手法
- センサ内蔵人形を用いた大規模モーションキャプチャデータの検索手法
- 角膜表面反射像の超解像処理による高解像シーン画像の推定(一般セッション,パターン認識によるインタフェースの未来)
- 第59回 サリエンシーディテクション(知っておきたいキーワード)
- 加速度センサによるユーザコントロールを導入した音楽に合った舞踊動作の自動生成