手話理解を目的とした単眼カメラ動画像からの3次元情報復元

概要

論文の詳細を見る
単眼カメラにより奥行き運動を伴う手話動作要素推定を行うために, 3次元要素の多面体で構成される片腕あたり7自由度の3次元人体モデルを用意し, 単眼カメラからの2次元動画像を当てはめるシステムを構築した.また, 顔や他の身体部位による自己遮蔽こもロバストな処理を実現するため, 3フレーム前までのオプティカルフローをもとに現時刻の連動指定を行った.本方式では, 3次元人体モデルが画像上の図形に当てはまるように3次元パラメータを設定するトップダウン方式と, 既に得られた情報を用いて画像上の特徴量から3次元パラメータを得るボトムアップアップ方式とを交互に行い, 矛盾を解消しながら解析を進めていく.本システムを用いて, 静止, 直線, 円, 円弧, それらの組み合わせ, といった動作要素を持つ動作の運動指定を行ったところ, 高い精度でのジェスチャ追跡を実現することができた.また, 特別な専用ハードウェアなしにコンピュータグラフィクスにより3次元動作を再現する実験でも, 1フレーム当たり340msのジェスチャ再現が可能であった.一連の結果は, 本システムが単眼カメラによる3次元手指運動推定に有効であることを示していた.
社団法人映像情報メディア学会の論文
2001-03-21

手話理解を目的とした単眼カメラ動画像からの3次元情報復元

スポンサーリンク

概要

著者

関連論文

スポンサーリンク