3Dスキャンに基づくプロシージャルフェイシャルアニメーション

もうだいぶ前の話だけど、3月にあったGDCのセッション「Next-Gen Characters:From Facial Scans to Facial Animation」の情報。
スライド資料はこちらからダウンロードできる。

3次元スキャナの性能が向上して、簡単にリアルなモデリングデータを取得できるようになったけど、それにどうリグを入れてアニメーションさせるかが問題。
単に基本的な顔をスキャンして、表情ごとに形状を変化させるだけではダメで、表情それぞれでテクスチャを変える必要もある。顔のデータの変形だけでは、血流量の変化などによる表情の違いまでは表現できない。

GPU Gems 3で解説された「Playable Universal Capture」(Ucap)と、南カリフォルニア大学による「Polynomial Displacement Maps」(PDM)の手法を参考にし、高精度の基本データと低精度だが大量の表情データを組み合わせる手法を採用しているとか。


スポンサーリンク


スポンサーリンク

4Gamer.netの日本語記事が分かりやすいね。

参考:Facial Animation GDC Slides
[GDC 2014]次世代のキャラクターアニメーションはこうなる。フェイシャルキャプチャを用いたプロシージャル処理の実際


スポンサーリンク

関連記事

Pix2Pix:CGANによる画像変換
法線マップを用意してCanvas上でShadingするサンプル
Windows Server 2008にAutodesk Maya 2009をインストール
Multi-View Environment:複数画像から3次元形状を再構築するライブラリ
ZBrushでアヴァン・ガメラを作ってみる 頭頂部の作り込み・舌の追加
Siggraph Asia 2009 カンファレンスの詳細
自前のShaderがおかしい件
OpenCV 3.3.0 contribのsfmモジュールのサンプルを動かしてみる
Autodesk Mementoでゴジラを3次元復元する
PGGAN:段階的に解像度を上げて学習を進めるGAN
OpenMayaRender
MB-Lab:Blenderの人体モデリングアドオン
OpenCVで動画の手ぶれ補正
ZBrushで仮面ライダー3号を造る ベース編
デザインのリファイン再び
CGWORLD CHANNEL 第21回ニコ生配信は『シン・ゴジラ』メイキングスペシャル!
リメイク版ロボコップスーツのメイキング
CGAN (Conditional GAN):条件付き敵対的生成ネットワーク
ZBrushで仮面ライダー3号を造る 仮面編
Dlib:C++の機械学習ライブラリ
Paul Debevec
ZBrushでゴジラ2001を作ってみる 姿勢の変更
ポリ男からMetaHumanを作る
参考書
HTML5・WebGLベースのグラフィックスエンジン『Goo Engine』
Unity MonoBehaviourクラスのオーバーライド関数が呼び出される順番
OpenCV バージョン4がリリースされた!
ZBrushでアヴァン・ガメラを作ってみる 下アゴの付け根を修正
オープンソースの顔の動作解析ツールキット『OpenFace』
書籍『イラストで学ぶ ディープラーニング』
Mitsuba 3:オープンソースの研究向けレンダラ
株式会社ヘキサドライブの研究室ページ
Adobeの手振れ補正機能『ワープスタビライザー』の秘密
OpenFace:Deep Neural Networkによる顔の個人識別フレームワーク
ZBrushでゴジラ2001を作ってみる 身体のアタリを作る
ZBrushでアヴァン・ガメラを作ってみる 壊れたデータの救出
第1回 3D勉強会@関東『SLAMチュートリアル大会』
HD画質の無駄遣い その2
CreativeCOW.net
ZBrushで仮面ライダー3号を造る 仮面編 Clay Polish
顔画像処理技術の過去の研究
『パシフィック・リム: アップライジング』のVFXブレイクダウン まとめ

コメント