3Dスキャンに基づくプロシージャルフェイシャルアニメーション

もうだいぶ前の話だけど、3月にあったGDCのセッション「Next-Gen Characters:From Facial Scans to Facial Animation」の情報。
スライド資料はこちらからダウンロードできる。

3次元スキャナの性能が向上して、簡単にリアルなモデリングデータを取得できるようになったけど、それにどうリグを入れてアニメーションさせるかが問題。
単に基本的な顔をスキャンして、表情ごとに形状を変化させるだけではダメで、表情それぞれでテクスチャを変える必要もある。顔のデータの変形だけでは、血流量の変化などによる表情の違いまでは表現できない。

GPU Gems 3で解説された「Playable Universal Capture」(Ucap)と、南カリフォルニア大学による「Polynomial Displacement Maps」(PDM)の手法を参考にし、高精度の基本データと低精度だが大量の表情データを組み合わせる手法を採用しているとか。


4Gamer.netの日本語記事が分かりやすいね。

参考:Facial Animation GDC Slides
[GDC 2014]次世代のキャラクターアニメーションはこうなる。フェイシャルキャプチャを用いたプロシージャル処理の実際

関連記事

ZBrushのTranspose Masterでポーズを付け...

YOLO (You Only Look Once):ディープ...

ZBrushでアヴァン・ガメラを作ってみる 脚のトゲの作り直...

Digital Emily Project:人間の顔をそっく...

ゴジラ(2014)のメイキング

Kubric:機械学習用アノテーション付き動画生成パイプライ...

MeshLab:3Dオブジェクトの確認・変換に便利なフリーウ...

UnityのTransformクラスについて調べてみた

ZBrushでアヴァン・ガメラを作ってみる 壊れたデータの救...

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

iPhone欲しいなぁ

Adobeの手振れ補正機能『ワープスタビライザー』の秘密

ZBrush 4R7

Zibra Liquids:Unity向け流体シミュレーショ...

AR (Augmented Reality)とDR (Dim...

参考書

写真に3Dオブジェクトを違和感無く合成する『3DPhotoM...

Javaで作られたオープンソースの3DCGレンダラ『Sunf...

After Effects全エフェクトの解説(6.5)

ZBrushでアヴァン・ガメラを作ってみる おでこ(?)のバ...

Texturing & Modeling A Pro...

粘土をこねるようなスカルプトモデリング

TeleSculptor:空撮動画からPhotogramme...

Google Colaboratoryで遊ぶ準備

ニューラルネットワークで画像分類

線画を遠近法で描く

PureRef:リファレンス画像専用ビューア

ラクガキの立体化 1年半ぶりの続き

ZBrushで仮面ライダー3号を造る 仮面編

COLMAP:オープンソースのSfM・MVSツール

Mayaのシェーディングノードの区分

ZBrushでゴジラ2001を作ってみる 身体のバランスを探...

なんかすごいサイト

自前Shaderの件 解決しました

SIGGRAPH 2020はオンライン開催

中学3年生が制作した短編映像作品『2045』

Oculus Goを購入!

頭蓋骨からの顔復元と進化過程の可視化

『パシフィック・リム: アップライジング』のVFXブレイクダ...

ZBrushの練習 手のモデリング

PCA (主成分分析)

Geogram:C++の3D幾何アルゴリズムライブラリ

コメント