3Dスキャンに基づくプロシージャルフェイシャルアニメーション

もうだいぶ前の話だけど、3月にあったGDCのセッション「Next-Gen Characters:From Facial Scans to Facial Animation」の情報。
スライド資料はこちらからダウンロードできる。

3次元スキャナの性能が向上して、簡単にリアルなモデリングデータを取得できるようになったけど、それにどうリグを入れてアニメーションさせるかが問題。
単に基本的な顔をスキャンして、表情ごとに形状を変化させるだけではダメで、表情それぞれでテクスチャを変える必要もある。顔のデータの変形だけでは、血流量の変化などによる表情の違いまでは表現できない。

GPU Gems 3で解説された「Playable Universal Capture」(Ucap)と、南カリフォルニア大学による「Polynomial Displacement Maps」(PDM)の手法を参考にし、高精度の基本データと低精度だが大量の表情データを組み合わせる手法を採用しているとか。


4Gamer.netの日本語記事が分かりやすいね。

参考:Facial Animation GDC Slides
[GDC 2014]次世代のキャラクターアニメーションはこうなる。フェイシャルキャプチャを用いたプロシージャル処理の実際

関連記事

Structure from Motion (多視点画像から...

ZBrush 2018へのアップグレード

ZBrushのUV MasterでUV展開

ラクガキの立体化 モールドの追加

Texturing & Modeling A Pro...

TeleSculptor:空撮動画からPhotogramme...

ZBrushCore

Unreal Engine Tokyo MeetUp!へ行っ...

TensorFlowでCGを微分できる『TensorFlow...

ZBrushでアヴァン・ガメラを作ってみる 甲羅の修正・脚の...

ZBrushで仮面ライダー3号を造る 仮面編

TensorSpace.js:ニューラルネットワークの構造を...

Rerun:マルチモーダルデータの可視化アプリとSDK

Multi-View Environment:複数画像から3...

ZBrushでゴジラ2001を作ってみる 身体のSubToo...

Physics Forests:機械学習で流体シミュレーショ...

世界一下品なクマと世界一紳士なクマ

BlenderのPython環境にPyTorchをインストー...

UnityでOpenCVを使うには?

色んな三面図があるサイト

布地のシワの法則性

MeshroomでPhotogrammetry

ZBrushで作った3Dモデルを立体視で確認できるVRアプリ...

bpy-renderer:レンダリング用Pythonパッケー...

ZBrushでアヴァン・ガメラを作ってみる 口のバランス調整

VCG Library:C++のポリゴン操作ライブラリ

fSpy:1枚の写真からカメラパラメーターを割り出すツール

フルCGのウルトラマン!?

単純に遊びに行くのはだめなのか?

UnityのAR FoundationでARKit 3

参考になりそうなサイト

Point Cloud Utils:Pythonで3D点群・...

ZBrushで仮面ライダー3号を造る 仮面編 DynaMes...

機械学習手法『Random Forest』

GoB:ZBrushとBlenderを連携させるアドオン

ポリゴンジオメトリ処理ライブラリ『pmp-library (...

ZBrushのUndo Historyをカメラ固定で動画化す...

ZBrushでアヴァン・ガメラを作ってみる 爪とトゲを追加

フォトンの放射から格納までを可視化した動画

OpenCV3.3.0でsfmモジュールのビルドに成功!

OpenMesh:オープンソースの3Dメッシュデータライブラ...

日本でMakersは普及するだろうか?

コメント