人間の顔をそっくりそのままCGで復元する『Digital Emily Project』

これはもう2009年の話だけど、たまたまTEDのプレゼンを見つけたのでメモ代わりに。

このThe Digital Emily Projectは、アメリカの南カリフォルニア大学 ICT Graphics LabとイギリスのImage Metrics社の共同プロジェクトで、実在の人間をそっくりそのままCGで復元してデジタルダブル(CGの俳優)の可能性を示したもの。
女優のEmily O’BrienさんをLight Stageでスキャンして本人そっくりのCGアニメーションを作成した。

ポール・デベヴェック 「メイキング・オブ・デジタルエミリー」

TEDxUSCでコンピュータグラフィックスの第一人者であるポール・デベヴェックが、デジタルエミリーの背後にある観客の目を奪うような技術について解説します。何度の撮り直しにも応えられるコンピュータで作り出されたリアルな人の顔をご覧ください。


スポンサーリンク


こちらがこの研究のデモ映像。当時は不気味の谷を越えたと言われたりしてたけど、今見るとどうでしょう。

The Digital Emily Project: Achieving a Photoreal Digital Actor

南カリフォルニア大学のポール・デベヴェックと言えば、イメージベースドレンダリングで超有名だよね。マトリックスのあの360度回転する映像の背景のCGは彼の技術によるもの。スパイダーマン2,3(サムライミ監督のシリーズ)での人の肌の表現も彼のLight Stageによるもの。



イメージベースドレンダリングは、学生の頃に初めて学校のお金で買ったこの本でもかなりフィーチャーされてた気がする。



ちなみにこの本は、2000年までのレンダリングの研究の歴史が日本語で読めるのでお勧めです。

そしてImage Metrics社は、マーカーレスの顔のパフォーマンスキャプチャをしている会社らしい。


スポンサーリンク
Image Metrics: How-To Video

Real-Time Emily Demo

この頃から5年経ったけど、今はリアルタイムでこんなの描画できちゃう時代になったんだよね。

NVIDIA FaceWorks

スポンサーリンク

関連記事

CreativeCOW.net
フルCGのウルトラマン!?
OpenCV 3.1のsfmモジュールを試す
自前のShaderがおかしい件
2019年10月 行動振り返り
ポリゴン用各種イテレータと関数セット
ファインモールド 1/144 ミレニアム・ファルコンの制作再開
Mayaのプラグイン開発
ドラマ『ファーストクラス』のモーショングラフィックス
Paul Debevec
シン・ゴジラのファンアート
SIGGRAPH論文へのリンクサイト
SIGGRAPH ASIA 2009で学生ボランティア募集してるみたい
ZBrush 2018での作業環境を整える
『さらば あぶない刑事』を観た
3Dコンピュータービジョンライブラリ『PyTorch3D』
ポリゴンジオメトリ処理ライブラリ『pmp-library (Polygon Mesh Process...
UnityでTweenアニメーションを実装できる3種類の無料Asset
書籍『3次元コンピュータビジョン計算ハンドブック』を購入
顔画像処理技術の過去の研究
Houdiniのライセンスの種類
ZBrushで仮面ライダー3号を造る 仮面編 リファレンス画像の表示
OpenMayaRender
PS3用ソフト『ゴジラ-GODZILLA-』を買った
3Dディープラーニング用のPyTorchライブラリ『Kaolin』
ウルトラマンパワードがBlu-Ray Box化!
PSPNet (Pyramid Scene Parsing Network):ディープラーニングによ...
ラクガキの立体化 3Dプリント注文
リメイクコンテンツにお金を払う歳になった
実写と実写の合成時の色の馴染ませテクニック
OpenCVの超解像(SuperResolution)モジュールを試す
RefineNet (Multi-Path Refinement Network):ディープラーニン...
「ドラゴンボールZ 復活のF」を観た
服飾デザインツール『CLO』
UnityでOpenCVを使うには?
リアルタイム レイトレーシングAPI『DirectX Raytracing (DXR)』
ニューラルネットワークと深層学習
SegNet:ディープラーニングによるSemantic Segmentation手法
なりたい自分?
オープンソースの3Dメッシュデータライブラリ『OpenMesh』
Windows Server 2008にAutodesk Maya 2009をインストール
タダでRenderManを体験する方法

コメント