Wiimote及びKinectを用いたユーザコントロールを導入した音楽に合った舞踊動作の自動生成(テーマセッション,パターン認識によるインタフェースの未来)
スポンサーリンク
概要
- 論文の詳細を見る
近年,キャラクターアニメーションに関する研究が数多く行われ,エンターテイメントの分野に応用されている.本稿ではユーザの盛り上がりをWiimoteとKinectを用いて取得し,舞踊アニメーションの動作生成に導入する手法を提案する.モーションキャプチャデータを用いて,ユーザの盛り上がりに同調するようにキャラクタの動きを生成することでユーザとのインタラクティビティを実現する.本手法では,音楽データからは楽曲構造解析によって曲をセグメントに分割し,リズム特徴量を抽出する.モーションキャプチャデータからは,モーションのリズムと盛り上がりを抽出する.これらの解析結果から,音楽のリズムと高い相関を示す動きセグメントを取り出し,モーション遷移グラフを生成する.舞踊生成時はそれぞれのセンサデータから取得したユーザの盛り上がり値とモーションの盛り上がりのマッチングを行い,モーション遷移グラフを探索することで舞踊動作を自動生成する.この手法を用いて,ヴァーチャルキャラクタとインタラクティブにダンスを行えるアプリケーションを開発し,それぞれのインタフェースについて考察を行った.
- 2012-09-27
著者
-
竹村 治雄
大阪大学サイバーメディアセンター
-
竹村 治雄
大阪大学大学院情報科学研究科
-
竹村 治雄
大阪大学大学院 情報科学研究科
-
中澤 篤志
科学技術振興事業団(東京大学生産技術研究所)
-
安永 卓哉
大阪大学大学院情報科学研究科
関連論文
- 作業者視点映像の全方位レンジデータへの投影による遠隔協調作業支援システム(作業支援,人工現実感)
- 双曲面ハーフミラーを用いた超広視野頭部搭載型プロジェクタによる投影映像の輝度補正の検討(複合現実感,仮想都市,及び一般)
- 眼球の表面反射を用いたディスプレイ・カメラキャリブレーション(幾何学的解析・最適化,画像の認識・理解論文)
- 双曲面ハーフミラーを用いた超広視野頭部搭載型プロジェクタのためのレンダリング手法(五感メディアの品質,仮想空間におけるコミュニケーションデザイン,一般)
- 座長からの報告
- 複数の仮想空間を操作するマルチビューポートインタフェースのフレームワークに関する評価
- レーザーレンジデータとGoogle Maps画像の位置合わせを用いた三次元都市環境のモデリング(テーマセッション1(広域空間センシング関連),実世界センシングとその応用)
- レーザーレンジデータとGoogle Maps画像の位置合わせを用いた環境のモデリング(テーマセッション4,アンビエント環境知能)
- レーザーレンジデータとGoogle Maps画像の位置合わせを用いた環境のモデリング(テーマ関連セッション4)
- 眼球の表面反射を用いたディスプレイ・カメラキャリブレーション (ヒューマン情報処理)
- 眼球の表面反射を用いたディスプレイ・カメラキャリブレーション (パターン認識・メディア理解)
- 眼球の表面反射を用いたディスプレイカメラキャリブレーション(テーマ関連セッション,手,顔,身体表現の認識,理解)
- 眼球の表面反射を用いたディスプレイカメラキャリブレーション(テーマセッション2)
- 3次元ビデオの連結による無限再生可能な自由視点映像の生成(テーマ関連セッション2)
- 3次元ビデオの連結による無限再生可能な自由視点映像の生成(テーマ関連セッション2,CV/PR技術のVRへの応用)
- MMM-Classification法によるレンジデータの認識 (ヒューマン情報処理)
- MMM-Classification法によるレンジデータの認識 (パターン認識・メディア理解)
- 複数シーンの連結によるインタラクティブ三次元ビデオ(基礎/応用,サイバーワールド論文)
- Boostingを用いたボリュームデータからの人体姿勢推定(一般セッション,手,顔,身体表現の認識,理解)
- Boostingを用いたボリュームデータからの人体姿勢推定(一般セッション4)
- ボリュームデータの細線化とグラフマッチングを用いた事例ベース人体姿勢推定(画像認識,コンピュータビジョン)
- Diskless Linuxを用いた情報教育システムの開発とその評価(分散システム構築運用技術,新しいパラダイムの中での分散システム/インターネット運用・管理)
- D-12-46 3次元Huモーメント不変量を用いた時系列ボリュームデータの圧縮法(D-12.パターン認識・メディア理解,一般講演)
- 視体積交差法復元形状への標準人体モデル当てはめによる高精度化
- ライブビデオと3次元実環境モデルを用いた遠隔協調作業支援システム
- 高等教育機関における次世代コース管理システムの構築に向けて(学習オブジェクト・学習データの活用と集約)
- 次の10年に向けて
- VR教育の充実への期待
- ウェアラブルARインタフェース
- まえがき : Beyond Desktop特集
- 英語によるコミュニケーションのすすめ
- 10-222 大阪大学のOCWの活用(口頭発表論文,オーガナイズドセッション「オープンコースウエアとその活用」-II)
- 移動ロボットによる災害地の三次元再構築のためのポテンシャル場を用いた経路計画(一般セッション,文字認識・文書理解)
- D-12-88 レーザセンサと単眼カメラを用いた台車型3次元計測センサ(D-12.パターン認識・メディア理解,一般セッション)
- ISMAR2007報告(会議報告)
- ISMAR2007報告(会議報告,CV/PR技術のVRへの応用)
- 座長からの報告
- 眼球の表面反射を用いたディスプレイ・カメラキャリブレーション(テーマ関連,顔・人物・ジェスチャ・行動)
- 眼球の表面反射を用いたディスプレイ・カメラキャリブレーション(テーマ関連,顔・人物・ジェスチャ・行動)
- 音楽に合った舞踊動作の自動生成
- 音楽に合った舞踊動作の自動生成
- MMM-Classfication法によるレンジデータの認識(一般,顔・人物・ジェスチャ・行動)
- MMM-Classfication法によるレンジデータの認識(一般,顔・人物・ジェスチャ・行動)
- 10-109 大阪大学のOCWのeduCommonsへの移行(オーガナイズドセッション「オープンコースウエアとその活用」-II,口頭発表論文)
- Boostingを用いたボリュームデータからの人体姿勢推定(一般セッション,手,顔,身体表現の認識,理解)
- Boostingを用いたボリュームデータからの人体姿勢推定(テーマ関連セッション2)
- 画像マーカを用いた屋内位置検出機構とその評価
- 画像マーカを用いた屋内位置検出機構とその評価
- 画像マーカを用いた屋内位置検出機構とその評価
- マーカと自然特徴点を併用した広範囲見回し可能なステレオビデオシースルー拡張現実感
- 印象語による舞踊動作データの分類法
- 印象語による舞踊動作データの分類法
- ウェアラブルPCのための画像マーカを用いた広域屋内位置検出機構
- ウェアラブルPCのための画像マーカを用いた広域屋内位置検出機構(映像メディア及び一般)
- ウェアラブルPCのための画像マーカを用いた広域屋内位置検出機構(映像メディア及び一般)
- ウェアラブルPCのための画像マーカを用いた屋内位置検出
- 眼球の表面反射を用いたディスプレイカメラキャリブレーション(テーマ関連セッション,手,顔,身体表現の認識,理解)
- 「複合現実感4」特集号刊行にあたって
- 都市環境ヒューマンメディア : バーチャルリアリティによる都市環境シミュレーション(特別講演)
- 小型半球面スクリーンを用いた没入型視覚ディスプレイの開発
- 現実空間への注釈表示が可能な高没入感遠隔指示システム(映像・マルチメディアとパターン認識・理解)
- 現実空間への注釈表示が可能な高没入感遠隔指示システム(映像・マルチメディアとパターン認識・理解)
- A-16-16 CyberDome とレーザポインタを用いた高没入感遠隔指示システム
- ボリュームデータの細線化とグラフマッチングを用いた事例ベース人体姿勢推定
- インバースレンダリングによる物体表面反射特性の推定(博士論文・卒業論文セッション)
- 実物体のモデル化のための相互反射を考慮した表面反射特性の推定(コンピュータビジョン, 画像の認識・理解論文)
- インバースレンダリングに基づく物体表面反射特性の密な推定(D論セッション(3))
- D-12-128 移動ロボットの遠隔操縦のための三次元情報提示システムの提案(D-12. パターン認識・メディア理解, 情報・システム2)
- AR環境における奥行き曖昧性と視認性を考慮した注釈提示手法とその評価
- D-11-78 3Dレンジデータによる災害状況認識(D-11.画像工学,一般セッション)
- 印象語による舞踊動作データの分類法
- アンビエントインタフェースーそのねらいと実現に向けて
- マルチユーザ・モバイル・ユビキタス環境のためのユーザインタフェース
- レーザーレンジデータとGoogle Maps画像の位置合わせを用いた環境のモデリング(テーマセッション4,アンビエント環境知能)
- 新たな飛躍に向けて, いま何をなすべきか? : SIG-MR, ISMARの10余年を振り返って
- 赤外線マーカーを利用した複合現実感のための位置合わせと情報伝達手法
- 移動ロボットによる災害地の三次元再構築のためのポテンシャル場を用いた経路計画(一般セッション,文字認識・文書理解)
- AR環境における奥行き曖昧性と視認性を考慮した注釈提示手法とその評価(映像メディア及び一般)
- AR環境における奥行きの明示的表現を用いた注釈提示手法とその評価(映像・マルチメディアとパターン認識・理解)
- 手による対話操作可能なパーティクルシステムと陰関数曲面を用いた仮想粘土モデル(映像メディアおよび一般 インターネット, デジタル放送, マルチメディア, 三次元画像, 視覚と画質評価, ITS等)
- 手による対話操作可能なパーティクルシステムと陰関数曲面を用いた仮想粘土モデル
- 手による対話操作可能なパーティクルシステムと陰関数曲面を用いた仮想粘土モデル
- パーティクルシステムと陰関数曲面を用いた対話的仮想粘土モデル
- 双曲面ハーフミラーを用いた広視野頭部搭載プロジェクタのための再帰性半透過スクリーンの検討(MR/ARの実用化に向けたCV/PR技術の課題と展望)
- 双曲面ハーフミラーを用いた広視野頭部搭載プロジェクタのための再帰性半透過スクリーンの検討(MR/ARの実用化に向けたCV/PR技術の課題と展望)
- A-16-9 奥行き情報を考慮した注釈表示手法の提案
- 複数の仮想空間を操作するマルチビューポートインタフェースのフレームワークに関する評価(「仮想都市とVR」特集)
- ウェアラブル拡張現実感のための赤外マーカのステレオ計測と姿勢センサを用いた位置・姿勢推定(「ウェアラブル・ユビキタス技術」特集)
- ライブビデオと3次元実環境モデルを用いた遠隔協調作業支援システム(「バーチャルVR〜VR技術の応用・転用・新展開」特集)
- マルチプロジェクタを用いたスケーラブル大型ドームディスプレイCyberDomeの開発
- A-16-15 IllusionHole マスクへの投影画像を利用した協調作業環境
- 「VRソフトウェア」特集号にあたって(VRソフトウェア)
- D-12-36 全方位画像センサによるテレプレゼンスの様々な実装
- 「複合現実感3」特集号刊行にあたって(「複合現実感3」特集)
- 「複合現実感4」特集号刊行にあたって(「複合現実感4」特集)
- D-12-141 ボクセルデータからの簡易なポリゴン変換の一手法
- Wiimote及びKinectを用いたユーザコントロールを導入した音楽に合った舞踊動作の自動生成(テーマセッション,パターン認識によるインタフェースの未来)
- Virtual Dance Hall 身体動作を用いたヴァーチャルキャラクターとのダンスインタラクション(バーチャルリアリティ,複合現実感,仮想都市,及び一般)
- 3-219 OCWからOERへ : その転換は可能か?(オーガナイズドセッション:オープンコースウェアとその応用-II)
- 加速度センサによるユーザコントロールを導入した音楽に合った舞踊動作の自動生成