3Dスキャンに基づくプロシージャルフェイシャルアニメーション

もうだいぶ前の話だけど、3月にあったGDCのセッション「Next-Gen Characters:From Facial Scans to Facial Animation」の情報。
スライド資料はこちらからダウンロードできる。

3次元スキャナの性能が向上して、簡単にリアルなモデリングデータを取得できるようになったけど、それにどうリグを入れてアニメーションさせるかが問題。
単に基本的な顔をスキャンして、表情ごとに形状を変化させるだけではダメで、表情それぞれでテクスチャを変える必要もある。顔のデータの変形だけでは、血流量の変化などによる表情の違いまでは表現できない。

GPU Gems 3で解説された「Playable Universal Capture」(Ucap)と、南カリフォルニア大学による「Polynomial Displacement Maps」(PDM)の手法を参考にし、高精度の基本データと低精度だが大量の表情データを組み合わせる手法を採用しているとか。


4Gamer.netの日本語記事が分かりやすいね。

参考:Facial Animation GDC Slides
[GDC 2014]次世代のキャラクターアニメーションはこうなる。フェイシャルキャプチャを用いたプロシージャル処理の実際

関連記事

NeRF (Neural Radiance Fields):...

Human Generator:Blenderの人体生成アド...

Maya LTでFBIK(Full Body IK)

OpenCVのバージョン3が正式リリースされたぞ

『パシフィック・リム: アップライジング』のVFXブレイクダ...

DUSt3R:3Dコンピュータービジョンの基盤モデル

ラクガキの立体化 反省

CGWORLD CHANNEL 第21回ニコ生配信は『シン・...

OpenCVで顔のランドマークを検出する『Facemark ...

ZBrushで仮面ライダー3号を造る 仮面編 Clay Po...

ラクガキの立体化 進捗

SSD (Single Shot Multibox Dete...

Qlone:スマホのカメラで3Dスキャンできるアプリ

ZBrushでアヴァン・ガメラを作ってみる 爪とトゲを追加

R-CNN (Regions with CNN featur...

Accord.NET Framework:C#で使える機械学...

Structure from Motion (多視点画像から...

フリーで使えるスカルプト系モデリングツール『Sculptri...

OpenCVでカメラ画像から自己位置認識 (Visual O...

粘土をこねるようなスカルプトモデリング

リアルタイム レイトレーシングAPI『DirectX Ray...

ZBrush 4R7

Siggraph Asia 2009 カンファレンスの詳細

布のモデリング

BlenderのGeometry Nodeで遊ぶ

『スター・ウォーズ フォースの覚醒』のVFXブレイクダウン ...

スクラッチで既存のキャラクターを立体化したい

なんかすごいサイト

オープンソースの顔認識フレームワーク『OpenBR』

リメイク版ロボコップスーツのメイキング

ジュラシック・パークのメイキング

Faceshiftで表情をキャプチャしてBlender上でM...

RefineNet (Multi-Path Refineme...

ZBrushでアヴァン・ガメラを作ってみる 甲羅のバランス調...

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

フリーのUV展開ツール Roadkill UV Tool

ZBrushで仮面ライダー3号を造る 仮面編 リファレンス画...

OpenCVで動画の手ぶれ補正

Raytracing Wiki

TorchStudio:PyTorchのための統合開発環境と...

タマムシっぽい質感

Kinect for Windows V2のプレオーダー開始

コメント