3Dスキャンに基づくプロシージャルフェイシャルアニメーション

もうだいぶ前の話だけど、3月にあったGDCのセッション「Next-Gen Characters:From Facial Scans to Facial Animation」の情報。
スライド資料はこちらからダウンロードできる。

3次元スキャナの性能が向上して、簡単にリアルなモデリングデータを取得できるようになったけど、それにどうリグを入れてアニメーションさせるかが問題。
単に基本的な顔をスキャンして、表情ごとに形状を変化させるだけではダメで、表情それぞれでテクスチャを変える必要もある。顔のデータの変形だけでは、血流量の変化などによる表情の違いまでは表現できない。

GPU Gems 3で解説された「Playable Universal Capture」(Ucap)と、南カリフォルニア大学による「Polynomial Displacement Maps」(PDM)の手法を参考にし、高精度の基本データと低精度だが大量の表情データを組み合わせる手法を採用しているとか。


4Gamer.netの日本語記事が分かりやすいね。

参考:Facial Animation GDC Slides
[GDC 2014]次世代のキャラクターアニメーションはこうなる。フェイシャルキャプチャを用いたプロシージャル処理の実際

関連記事

実写と実写の合成時の色の馴染ませテクニック

顔追跡による擬似3D表示『Dynamic Perspecti...

イタリアの自動車ブランドFiatとゴジラがコラボしたCMのメ...

第25回コンピュータビジョン勉強会@関東に行って来た

OpenCV バージョン4がリリースされた!

MRenderUtil::raytrace

CNN Explainer:畳み込みニューラルネットワーク可...

CGALDotNet:計算幾何学ライブラリ CGALのC#ラ...

Kubric:機械学習用アノテーション付き動画生成パイプライ...

Mayaのポリゴン分割ツールの進化

スターウォーズ エピソードVIIの予告編

PythonでMayaのShapeノードプラグインを作る

OpenCVで平均顔を作るチュートリアル

OpenCVでiPhone6sのカメラをキャリブレーションす...

OpenCV 3.1のsfmモジュールを試す

Blender 2.8がついに正式リリース!

Mitsuba 3:オープンソースの研究向けレンダラ

UnityのGameObjectの向きをScriptで制御す...

3D Gaussian Splatting:リアルタイム描画...

ラクガキの立体化 1年半ぶりの続き

ZBrushでアヴァン・ガメラを作ってみる おでこ(?)のバ...

注文してた本が届いた

タダでRenderManを体験する方法

オープンソースのテクスチャマッピングシステム『Ptex』

iPhoneで3D写真が撮れるアプリ『seene』

ZBrushでアヴァン・ガメラを作ってみる モールドの彫り込...

アニゴジ関連情報

Vancouver Film Schoolのデモリール

Mayaのレンダリング アトリビュート

Live CV:インタラクティブにComputer Visi...

生物の骨格

顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト

BlenderでPhotogrammetryできるアドオン

DensePose:画像中の人物表面のUV座標を推定する

ZBrushで仮面ライダー3号を造る 仮面編 横顔のシルエッ...

画像生成AI Stable Diffusionで遊ぶ

オープンソースのロボットアプリケーションフレームワーク『RO...

MB-Lab:Blenderの人体モデリングアドオン

Kaolin:3Dディープラーニング用のPyTorchライブ...

トランスフォーマーロストエイジのメイキング

ZBrushで仮面ライダー3号を造る 仮面編 Dam Sta...

ZBrushで仮面ライダー3号を造る 仮面編 リファレンス画...

コメント