3Dスキャンに基づくプロシージャルフェイシャルアニメーション

もうだいぶ前の話だけど、3月にあったGDCのセッション「Next-Gen Characters:From Facial Scans to Facial Animation」の情報。
スライド資料はこちらからダウンロードできる。

3次元スキャナの性能が向上して、簡単にリアルなモデリングデータを取得できるようになったけど、それにどうリグを入れてアニメーションさせるかが問題。
単に基本的な顔をスキャンして、表情ごとに形状を変化させるだけではダメで、表情それぞれでテクスチャを変える必要もある。顔のデータの変形だけでは、血流量の変化などによる表情の違いまでは表現できない。

GPU Gems 3で解説された「Playable Universal Capture」(Ucap)と、南カリフォルニア大学による「Polynomial Displacement Maps」(PDM)の手法を参考にし、高精度の基本データと低精度だが大量の表情データを組み合わせる手法を採用しているとか。


4Gamer.netの日本語記事が分かりやすいね。

参考:Facial Animation GDC Slides
[GDC 2014]次世代のキャラクターアニメーションはこうなる。フェイシャルキャプチャを用いたプロシージャル処理の実際

関連記事

Polyscope:3Dデータ操作用GUIライブラリ

物理ベースレンダリングのためのマテリアル設定チートシート

Adobe MAX 2015

第20回 文化庁メディア芸術祭『3DCG表現と特撮の時代』

Facebookの顔認証技術『DeepFace』

Unityをレンダラとして活用する

ラクガキの立体化 モールドの追加

Accord.NET Framework:C#で使える機械学...

映画『ブレードランナー 2049』のVFX

Alice Vision:オープンソースのPhotogram...

画像認識による位置情報取得 - Semi-Direct Mo...

MFnMeshクラスのsplit関数

LuxCoreRender:オープンソースの物理ベースレンダ...

ZBrushでアヴァン・ガメラを作ってみる モールドの彫り込...

ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調...

ZBrushの練習 手のモデリング

3D映画のポストプロダクション 2D-3D変換

WebGL開発に関する情報が充実してきている

hloc:SuperGlueで精度を向上させたSfM・Vis...

オープンソースのネットワーク可視化ソフトウェアプラットフォー...

ZBrushでアヴァン・ガメラを作ってみる 下半身のバランス...

ZBrushで仮面ライダーBLACK SUNを作る 頭部~バ...

ZBrushで仮面ライダー3号を造る ベース編

PolyPaint

MeshLab:3Dオブジェクトの確認・変換に便利なフリーウ...

UnityのTransformクラスについて調べてみた

素敵なパーティクル

ニューラルネットワークで画像分類

HD画質の無駄遣い その2

3Dグラフィックスの入門書

ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始...

FreeMoCap Project:オープンソースのマーカー...

OpenCV 3.1から追加されたSfMモジュール

ジュラシック・パークのメイキング

UnityでARKit2.0

ZBrush キャラクター&クリーチャー

CycleGAN:ドメイン関係を学習した画像変換

libigl:軽量なジオメトリ処理ライブラリ

BlenderProc:Blenderで機械学習用の画像デー...

Blender 2.8がついに正式リリース!

ZBrushでゴジラ2001を作ってみる 身体のバランスを探...

Adobe Photoshop CS5の新機能

コメント