モーションキャプチャで得られる顔の動きを用いた動的な三次元顔表情の生成

摘要

本研究では，モーションキャプチャで得られる表情表出時の顔の動きを用いて，その表情時の顔三次元形状の推定を行った．モーションキャプチャシステムで真顔の状態からの数種類の表情表出を，三次元レンジファインダで真顔と数種類の表情顔を計測し，それぞれ表情顔と真顔との差分を求め表情毎の平均を算出した．この表情平均に対しモーションキャプチャデータと三次元形状それぞれ別々に主成分分析を施し，得られた主成分空間に表情平均を写像することで次元圧縮を行った．こうして得られた表情パラメータ同士を等号で結ぶ行列を求めた．その行列に基づきモーションキャプチャの全フレームにおいて，その表情時の三次元形状を推定する事で動的な三次元顔表情の生成を行った．