3次元計測に基づいた顔画像の実時間表情再現方法

概要

論文の詳細を見る
臨場感通信会議システムでは、参加者の表情を送信側で検出し、受信側において3次元顔モデル(3D Wire Frame Model:WFM)で再現する。筆者らは既に、実時間で表情を検出・合成するため、人物の顔にマーカを貼付し、CCDカメラを用い顔画像中で追跡するとともに、表情の変化を定義したモーションルールに従って表情を再現するシステムを構築しているが、表情再現品質、再現可能表情数等に課題があった。そこで、筆者らは各種表情表出時における3次元計測に基づき、実時間表示を行う手法を提案している。本報告では3次元計測とカメラ画像系の誤差を検討し、表情再現品質の向上を目指す。3次元計測により各種表情表出時における顔表面上の各点における無表情の位置からの移動ベクトルをあらかじめ求め、顔画像に投影して基準ベクトルとする。顔画像から入力されるマーカの動きベクトルを前述の基準ベクトル和で表現し、WFMの各頂点の3次元移動ベクトルを求めることにより表情再現を行う。しかし、主に前述の3次元計測系における誤差要因のため、CCDカメラ系と3D系の関連付けにおいて精度の点で問題があった。本稿では、その問題を克服するために、基準ベクトルを作成する時に、3次元計測データと2次元計測データの誤差が最少になるように、遺伝的アルゴリズム(Genetic Algorithm:GA)を用いて各種パラメータを最適化する。さらになお残存する誤差を登録しておき、移動量の計算の際に利用することで、高速で高品質な表情再現を行う手法を、本稿では提案し検討する。
社団法人電子情報通信学会の論文
1995-09-05

3次元計測に基づいた顔画像の実時間表情再現方法

スポンサーリンク

概要

著者

関連論文

スポンサーリンク