3Dスキャンに基づくプロシージャルフェイシャルアニメーション

もうだいぶ前の話だけど、3月にあったGDCのセッション「Next-Gen Characters:From Facial Scans to Facial Animation」の情報。
スライド資料はこちらからダウンロードできる。

3次元スキャナの性能が向上して、簡単にリアルなモデリングデータを取得できるようになったけど、それにどうリグを入れてアニメーションさせるかが問題。
単に基本的な顔をスキャンして、表情ごとに形状を変化させるだけではダメで、表情それぞれでテクスチャを変える必要もある。顔のデータの変形だけでは、血流量の変化などによる表情の違いまでは表現できない。

GPU Gems 3で解説された「Playable Universal Capture」(Ucap)と、南カリフォルニア大学による「Polynomial Displacement Maps」(PDM)の手法を参考にし、高精度の基本データと低精度だが大量の表情データを組み合わせる手法を採用しているとか。


4Gamer.netの日本語記事が分かりやすいね。

参考:Facial Animation GDC Slides
[GDC 2014]次世代のキャラクターアニメーションはこうなる。フェイシャルキャプチャを用いたプロシージャル処理の実際

関連記事

3Dスキャンしたテクスチャから照明を除去するUnityツール...

Siggraph Asia 2009 カンファレンスの詳細

OpenGVの用語

iPadをハンディ3Dスキャナにするガジェット『iSense...

R-CNN (Regions with CNN featur...

OpenSfM:PythonのStructure from ...

書籍『イラストで学ぶ ディープラーニング』

Texturing & Modeling A Pro...

ZBrushで仮面ライダー3号を造る 仮面編

Unity ARKitプラグインサンプルのドキュメントを読む

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

OpenGVのライブラリ構成

ZBrushでアヴァン・ガメラを作ってみる おでこ(?)のバ...

ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調...

PythonでMayaのShapeノードプラグインを作る

ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始...

デザインのリファイン再び

テスト

粘土をこねるようなスカルプトモデリング

OpenCVで顔のモーフィングを実装する

Facebookの顔認証技術『DeepFace』

OpenMayaRender

Maya には3 種類のシェーダSDKがある?

『ローグ・ワン/スター・ウォーズ・ストーリー』のVFXブレイ...

リメイク版ロボコップスーツのメイキング

書籍『The Art of Mystical Beasts』...

顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト

日立のフルパララックス立体ディスプレイ

MFnMeshクラスのsplit関数

ZBrushでアヴァン・ガメラを作ってみる 爪とトゲを追加

OpenCV 3.1とopencv_contribモジュール...

実写と実写の合成時の色の馴染ませテクニック

HTML5・WebGLベースのグラフィックスエンジン『Goo...

BSDF: (Bidirectional scatterin...

Autodesk CompositeとAutodesk Ma...

なんかすごいサイト

UnityでTweenアニメーションを実装できる3種類の無料...

PCA (主成分分析)

線画を遠近法で描く

Mixamo:人型3Dキャラクターアニメーション制作サービス

Ambient Occlusionを解析的に求める

GAN (Generative Adversarial Ne...

コメント