MM-Space:頭部運動の物理的補強表現に基づく会話場再構成
スポンサーリンク
概要
- 論文の詳細を見る
複数人物による対面会話場面を実世界に再構成するためのシステムを提案する.本研究では,時間・空間を隔てた会話の状況を,あたかもその場にいるかのように観測できるシステムの実現を目指し,会話者の顔画像をスクリーンに投影しつつ,その人物の頭部運動をスクリーンの物理的な運動として補強して提示するという表現方法を提案する.本システムでは,会話者の配置に合わせて,複数のプロジェクタ,および,透過型スクリーンが配置され,各スクリーンに等身大の人物像が投影される.スクリーンにはアクチュエータが接続され,計測された会話者の頭部姿勢と同期して,スクリーンの姿勢が動的に制御される.人物の頭部運動には,視線方向の遷移にともなう首振りや頷きが含まれ,このスクリーンの物理的な運動と画像運動との相乗効果により,会話者の動作がより明確に観測者により知覚されることが期待される.さらに枠なし透明スクリーンへの背景なし人物像の投影により,高い存在感の醸成も期待できる.実験により,このスクリーンの動きの効果として,会話者の視線方向がより分かりやすく,かつ,話し手の話しかける相手がより正確に理解されるという仮説の妥当性が示唆された.
- 2013-04-15
著者
-
大塚 和弘
日本電信電話株式会社コミュニケーション科学基礎研究所
-
大和 淳司
日本電信電話株式会社第3部門
-
大塚 和弘
NTTコミュニケーション科学基礎研究所
-
大塚 和弘
NTTサイバーソリューション研究所
-
大塚 和弘
NTTヒューマンインタフェース研究所
-
大和 淳司
日本電信電話(株)第三部門
-
Yamato Junji
Ntt R & D Strategy Department Ntt Corporation
-
Yamato Junji
Ntt Communication Science Laboratories Ntt Corp.
-
大塚 和弘
横浜国立大学工学部電子情報工学科
-
松田 昌史
日本電信電話株式会社NTTコミュニケーション科学基礎研究所
-
大塚 和弘
日本電信電話株式会社NTTコミュニケーション科学基礎研究所
-
熊野 史朗
日本電信電話株式会社NTTコミュニケーション科学基礎研究所
-
大和 淳司
日本電信電話(株)NTTコミュニケーション科学基礎研究所
関連論文
- グラフコストの逐次更新を用いた映像顕著領域の自動抽出(テーマセッション,映像ハンドリング技術とその応用)
- グラフコストの逐次更新を用いた映像顕著領域の自動抽出(テーマセッション,映像ハンドリング技術とその応用)
- グラフコストの逐次更新を用いた映像顕著領域の自動抽出(テーマセッション,映像ハンドリング技術とその応用)
- 視覚的注意の確率的モデル化のための動的マルコフ確率場(テーマセッション2,アンビエント環境知能)
- グラフコストの逐次更新を用いた映像顕著領域の自動抽出(画像映像解析,画像の認識・理解論文)
- メモリベースパーティクルフィルタ : 状態履歴に基づく事前分布予測を用いた頑健な対象追跡(画像映像解析,第12回画像の認識・理解シンポジウム推薦論文,画像の認識・理解論文)
- MCMC-based particle filterを用いた人間の映像注視行動の実時間推定(テーマセッション,映像ハンドリング技術とその応用)
- MCMC-based particle filterを用いた人間の映像注視行動の実時間推定(テーマセッション,映像ハンドリング技術とその応用)
- 多人数会話シーン分析に向けた実時間マルチモーダルシステムの構築 : マルチモーダル全方位センサを用いた顔方向追跡と話者ダイアリゼーションの統合(テーマセッション2,アンビエント環境知能)
- 多人数会話シーン分析に向けた実時間マルチモーダルシステムの構築 : マルチモーダル全方位センサを用いた顔方向追跡と話者ダイアリゼーションの統合(テーマ関連セッション2)
- 音響情報と映像情報の統合による多人数会話における話者決定技術(音響処理・話者同定,第10回音声言語シンポジウム)
- 色を忠実に再現する高精細分光画像撮影技術 (特集 「見る・見せる」技術の最先端)
- 局地・短時間気象予測システム:My Weather
- 頭部姿勢の変動に頑健な表情認識技術--表情から人の気持ちを読み取ることを目指して
- パーティクルフィルタとこう配法の組合せによる頭部姿勢と表情の同時推定(メディア処理,画像の認識・理解論文)
- 複数人会話における非言語インタラクション構造の推定--誰が誰にどのように反応しているか?
- 表情認識のための変動輝度テンプレートとその頭部姿勢変動に対する頑健性の一検討(テーマ関連セッション3)
- 気象レーダ画像を対象とした検索に基づく映像予測の検討
- 時空間中の運動軌跡に基づくテンポラルテクスチャー解析 (画像の認識・理解)
- 局地・短時間気象予報システム : My Weather
- D-11-140 映像予測のための検索類似尺度の検討
- 時空間中の運動軌跡に基づくオプティカルフローの推定
- 高速メディア探索 (特集 コミュニケーション環境の未来に向けた研究最前線)
- 局地・短時間気象予測システム:My Weather
- 多人数会話シーン分析に向けた実時間マルチモーダルシステムの構築 : マルチモーダル全方位センサを用いた顔方向追跡と話者ダイアリゼーションの統合(テーマセッション2,アンビエント環境知能)
- CVPR2009報告 (パターン認識・メディア理解)
- 適応的領域分割と閾値推定を用いた高速テンプレートマッチング(一般セッション,コンピュータビジョンとパターン認識のための機械学習と最適化,一般)
- 適応的領域分割と闘値推定を用いた高速テンプレートマッチング(一般セッション,コンピュータビジョンとパターン認識のための機械学習と最適化,一般)
- 複数人物の対面会話を対象としたマルコフ切替えモデルに基づく会話構造の確率的推論(ヒューマンインタフェース基礎)
- 5B-3 家庭用ロボットのための触覚インタフェース
- 重み付き特徴点照合に基づく高速画像検索(テーマセッション: 時系列・大規模メディア処理, データ工学とメディア理解との融合)
- 重み付き特徴点照合に基づく高速画像検索(テーマセッション: 時系列・大規模メディア処理, データ工学とメディア理解との融合)
- CVPR2009報告
- パーティクルフィルタとMCMC : そのコミュニケーション科学への応用(若手研究者のための講演会)
- ペット型ロボットのための全身触覚インタフェースによる人の触行動識別
- ペット型ロボットのための全身触覚インタフェースによる人の触行動識別
- 圧力分布センサによる人の触行動の実時間識別とその個人適応手法
- エージェントとロボットによるユーザ行動への影響評価
- 会話シーン分析のための音声映像技術 (特集 コミュニケーション科学の融合研究における新潮流)
- 音響情報と映像情報の統合による多人数会話における話者決定技術(音響処理・話者同定,第10回音声言語シンポジウム)
- 音響情報と映像情報の統合による多人数会話における話者決定技術(音響処理・話者同定,第10回音声言語シンポジウム)
- 変動輝度テンプレートによる頭部姿勢と表情の同時推定
- ICMI 2007参加報告
- コミュニケーションを理解する音声・映像技術 (特集 我が国基礎・基盤研究の現状--NTTコミュニケーション科学基礎研究所)
- 表情認識のための変動輝度テンプレートとその頭部姿勢変動に対する頑健性の一検討(テーマ関連セッション3,顔・ジェスチャの認識・理解)
- 表情認識のための変動輝度テンプレートとその頭部姿勢変動に対する頑健性の一検討(テーマ関連セッション3,顔・ジェスチャの認識・理解)
- Robust Character Recognition Using Adaptive Feature Extraction Method
- Basic Design of Video Communication System Enabling Users to Move Around in Shared Space
- H-036 Subtle Facial Expression Recognition Based on Expression Category-dependent Motion Magnification
- ITSのための局地気象予測
- 局所降水予測に向けた類似気象パターン検索
- 時空間中の運動軌跡に基づくテンポラルテクスチャーの特徴抽出
- ニューロセグメント法による短時間降水予測精度の改善
- 時空間画像解析によるレーダエコーパターンの特徴抽出と分類
- 時空間中の運動軌跡に基づく密なオプティカルフローの推定
- ニューロ気象予測システムMy Weather
- 時空間速度場の分割に基づく降水予測
- 気象予測システム : My Weatherの性能評価
- 時空間中の運動軌跡に基づく画像速度の推定
- 時空間画像中の運動軌跡の統合に基づくオプティカルフロー推定法
- 時系列画像パターンに対するニューラルネットの動き学習能力の検証
- LH-003 変動輝度テンプレートを用いた頭部姿勢変動に頑健な確率的表情認識手法(画像認識・メディア理解)
- 非言語行動の観測に基づく複数人物の会話シーン分析 招待講演
- 姿勢とアピアランスの変化に頑健な対象追跡を実現するアピアランス統合メモリベースパーティクルフィルタ (画像の認識・理解論文特集)
- 対面の複数人対話を撮影対象とした対話参加者の視線に基づく映像切替え方法とその効果(グループウェア)
- 複数人対話シーンの映像編集のための対話参加者の視線に基づく映像切り替え方法とその効果(ヒューマンコミュニケーショングループ(HCG)シンポジウム)
- A-14-6 対話参加者の視線に基づく映像切り替え方法とその効果(A-14. ヒューマンコミュニケーション基礎)
- 視線の機能に着目した映像切り替え規則とその効果 : 人に分かりやすい映像生成を目指して(ヒューマンコミュニケーション及び一般)(ヒューマンコミュニケーショングループ(HCG)大会)
- A-15-9 視線情報に基づく映像切り替え規則とその評価
- 京都祇園祭における船鉾懸装品の超高精細分光画像撮影(MR/ARの実用化に向けたCV/PR技術の課題と展望)
- 姿勢とアピアランスの変化に頑健な対象追跡を実現するアピアランス統合メモリベースパーティクルフィルタ(画像・映像解析,第13回画像の認識・理解シンポジウム推薦論文,画像の認識・理解論文)
- 身体尺から見直すタッチパネル・インタフェース--ハードウェアの模倣からソフトウェアの柔軟さ (マルチメディア情報ハイディング・エンリッチメント)
- 身体尺から見直すタッチパネル・インタフェース--ハードウェアの模倣からソフトウェアの柔軟さ (画像工学)
- 身体尺から見直すタッチパネル・インタフェース--ハードウェアの模倣からソフトウェアの柔軟さ (ライフインテリジェンスとオフィス情報システム)
- 手話会話における修復組織の分析(一般,『コミュニケーションの身体を捉える』及び一般)
- 京都祇園祭における船鉾懸装品の超高精細分光画像撮影(MR/ARの実用化に向けたCV/PR技術の課題と展望)
- 複数人対話を対象とした表情と視線に基づく共感/反感の推定モデルとその評価--対話者間に生まれる感情をいかに理解するか? (ヒューマンコミュニケーション基礎)
- 多視点観測に基づく複数物体の相互オクルージョン解析と逐次状態推定
- 多視点観測に基づく複数物体の相互オクルージョン解析と逐次状態推定
- 発話行為の定量的分析に基づくコミュニケーションシステム評価法 : 顔向きの情報をサポートするVMCシステムの比較評価(コミュニケーション支援,一般)
- 発話行為の定量的分析に基づくコミュニケーションシステム評価法 : 顔向きの情報をサポートするVMCシステムの比較評価(コミュニケーション支援,一般)
- 複数人対話を対象とした表情と視線に基づく共感/反感の推定モデルとその評価 : 対話者間に生まれる感情をいかに理解するか?(顔とコミュニケーション)
- 身体尺から見直すタッチパネル・インタフェースハードウェアの模倣からソフトウェアの柔軟さ
- 身体尺から見直すタッチパネル・インタフェース : ハードウェアの模倣からソフトウェアの柔軟さ (メディア工学)
- 招待講演 複数人会話シーン分析の研究と今後の展望 (音声)
- 動くディスプレイで会話が伝わる (特集 情報と人間を結ぶコミュニケーション科学)
- ビデオ通信環境における対人印象に関する探索的研究 : 当事者評価と傍観者評価の比較(コミュニケーションの心理及び一般)
- 手話会話における表現モダリティの継続性(相互作用のマルチモーダル分析)
- ビデオ通信環境における対人印象の規定因に関する探索的実験研究 : 第三者に対する映像呈示と音声呈示の比較(コミュニケーション(技術),「身体,あそび,コミュニケーション」及びコミュニケーション一般)
- MM-Space:頭部運動の物理的補強表現に基づく会話場再構成
- ビデオ通信環境における対人印象に関する探索的研究 : 当事者評価と傍観者評価の比較
- 複数人物の対面会話を対象としたマルコフ切替えモデルに基づく会話構造の確率的推論(ヒューマンインタフェース基礎)
- 複数人会話シーン分析の研究と今後の展望(オーガナイズドセッション:マルチモーダル情報によるコミュニケーション環境理解,認識,理解,対話,一般)
- 会話における参与役割志向態度に基づく順番交替分析:-人の「話したい」「聞きたい」態度が次話者を決定する仕組み-
- Capture and Drop : 全周囲3次元形状計測とAR表示位置指定を行う箱型デバイス (マルチメディア・仮想環境基礎)
- 正確な色再現を目的とした2眼ステレオ式6バンドビデオシステム(テーマセッション,実時間処理実空間センシングと環境理解)
- 視線一致範囲測定に関する探索的検討 : 疎らな実験データの解析(『場のデザイン』及びコミュニケーション一般)
- アイコンタクト知覚範囲の性差に関する探索的検討 : 社交性不安およびアイコンタクト相手の性別の影響(顔、表情の認知・理解,コミュニケーションの心理及び一般)
- 正確な色再現を目的とした2眼ステレオ式6バンドビデオシステム(テーマセッション,実時間処理実空間センシングと環境理解)
- ビデオ通信環境における対人印象の規定因に関する探索的実験研究第三者に対する映像呈示と音声呈示の比較