3Dスキャンに基づくプロシージャルフェイシャルアニメーション

もうだいぶ前の話だけど、3月にあったGDCのセッション「Next-Gen Characters:From Facial Scans to Facial Animation」の情報。
スライド資料はこちらからダウンロードできる。

3次元スキャナの性能が向上して、簡単にリアルなモデリングデータを取得できるようになったけど、それにどうリグを入れてアニメーションさせるかが問題。
単に基本的な顔をスキャンして、表情ごとに形状を変化させるだけではダメで、表情それぞれでテクスチャを変える必要もある。顔のデータの変形だけでは、血流量の変化などによる表情の違いまでは表現できない。


スポンサーリンク

GPU Gems 3で解説された「Playable Universal Capture」(Ucap)と、南カリフォルニア大学による「Polynomial Displacement Maps」(PDM)の手法を参考にし、高精度の基本データと低精度だが大量の表情データを組み合わせる手法を採用しているとか。


スポンサーリンク


4Gamer.netの日本語記事が分かりやすいね。

参考:Facial Animation GDC Slides
[GDC 2014]次世代のキャラクターアニメーションはこうなる。フェイシャルキャプチャを用いたプロシージャル処理の実際


スポンサーリンク

関連記事

OpenCVで顔のモーフィングを実装する
Siggraph Asia 2009 カンファレンスの詳細
世界一下品なクマと世界一紳士なクマ
MFnDataとMFnAttribute
PGGAN:段階的に解像度を上げて学習を進めるGAN
映画『ミュータント・タートルズ』を観てきた
Mixamo:人型3Dキャラクターアニメーション制作サービス
Photoshopで作る怪獣特撮チュートリアル
この本読むよ
マジョーラ
OpenMVSのサンプルを動かしてみる
Mask R-CNN:ディープラーニングによる一般物体検出・Instance Segmentatio...
ZBrushでアヴァン・ガメラを作ってみる 腕の作り込み
AndroidもopenGLも初心者さ (でもJavaは知ってるよ)
UnityでShaderの入力パラメータとして行列を渡す
COLMAP:オープンソースのSfM・MVSツール
オープンソースの物理ベースGIレンダラ『appleseed』
TVML (TV program Making language)
Structure from Motion (多視点画像からの3次元形状復元)
サンプルコードにも間違いはある?
DCGAN (Deep Convolutional GAN):畳み込みニューラルネットワークによる敵...
ZBrushで仮面ライダーBLACK SUNを作る 頭部~バストの概形
アニゴジ関連情報
トランスフォーマーロストエイジのメイキング
スクラッチで既存のキャラクターを立体化したい
Autodesk Mementoでゴジラを3次元復元する
CLO:服飾デザインツール
Blender 2.8がついに正式リリース!
立体視を試してみた
BlenderでPhotogrammetryできるアドオン
R-CNN (Regions with CNN features):ディープラーニングによる一般物体...
Live CV:インタラクティブにComputer Visionコーディングができるツール
TensorSpace.js:ニューラルネットワークの構造を可視化するフレームワーク
Kornia:微分可能なコンピュータービジョンライブラリ
ラクガキの立体化 3Dプリント注文
ゴジラ(2014)のディティール制作の舞台裏
オープンソースの顔認識フレームワーク『OpenBR』
OpenCV 3.3.0-RCでsfmモジュールをビルド
映画『ジュラシック・ワールド』のVFXメイキング
ZBrushの練習 手のモデリング
SIGGRAPH論文へのリンクサイト
OpenMayaのPhongShaderクラス

コメント