Digital Emily Project:人間の顔をそっくりそのままCGで復元する

これはもう2009年の話だけど、たまたまTEDのプレゼンを見つけたのでメモ代わりに。

このThe Digital Emily Projectは、アメリカの南カリフォルニア大学 ICT Graphics LabとイギリスのImage Metrics社の共同プロジェクトで、実在の人間をそっくりそのままCGで復元してデジタルダブル(CGの俳優)の可能性を示したもの。
女優のEmily O’BrienさんをLight Stageでスキャンして本人そっくりのCGアニメーションを作成した。

ポール・デベヴェック 「メイキング・オブ・デジタルエミリー」

TEDxUSCでコンピュータグラフィックスの第一人者であるポール・デベヴェックが、デジタルエミリーの背後にある観客の目を奪うような技術について解説します。何度の撮り直しにも応えられるコンピュータで作り出されたリアルな人の顔をご覧ください。


スポンサーリンク


スポンサーリンク


こちらがこの研究のデモ映像↓



当時は不気味の谷を越えたと言われたりしてたけど、今見るとどうでしょう。

南カリフォルニア大学のポール・デベヴェックと言えば、イメージベースドレンダリングで超有名だよね。マトリックスのあの360度回転する映像の背景のCGは彼の技術によるもの。



スパイダーマン2, 3(サムライミ監督のシリーズ)での人の肌の表現も彼のLight Stageによるもの。



イメージベースドレンダリングは、学生の頃に初めて学校のお金で買ったこの本でもかなりフィーチャーされてた気がする。



ちなみにこの本は、2000年までのレンダリングの研究の歴史が日本語で読めるのでお勧めです。

そしてImage Metrics社は、マーカーレスの顔のパフォーマンスキャプチャをしている会社らしい。





この頃から5年経ったけど、今はリアルタイムでこんなの描画できちゃう時代になったんだよね。



2023年 追記:今はもっとすごい↓
ポリ男からMetaHumanを作る
ポリ男をリファインしたのでポリ男のMeshからこのチュートリアル動画に従ってMetaHumanを作成してみよう↓作業に入る前に、作業の全体像と各工程で使うツールの関係を整理して把握しておこう。チュートリアル動画によると、 自作の顔Meshを...


スポンサーリンク

関連記事

オープンソースのテクスチャマッピングシステム『Ptex』

サンライズの勇者シリーズ30周年

Unityの薄い本

ZBrushで仮面ライダー3号を造る 仮面編 PolyGroupを分割する

顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト

2021年4月 振り返り

ZBrushでリメッシュとディティールの転送

ゴジラ三昧

2012のメイキングまとめ(途中)

BlenderのGeometry Nodeで遊ぶ

HerokuでMEAN stack

『スター・ウォーズ 最後のジェダイ』のVFXブレイクダウン まとめ

Kinect for Windows v2の日本価格決定

ジュラシック・パークの続編『ジュラシック・ワールド』

2012 昨日のクローズアップ現代を見た

mentalrayのSubsurface Scattering Shader『misss_fast_...

Open Shading Language (OSL)

3D復元技術の情報リンク集

書籍『ゼロから作るDeep Learning』で自分なりに学ぶ

ガメラ生誕50周年

Cartographer:オープンソースのSLAMライブラリ

Oculus Goを購入!

ガレージキットの「やり過ぎ」の精神

無料で使える人体3DCG作成ツール

HTML5・WebGLベースのグラフィックスエンジン『Goo Engine』

Mitsuba 3:オープンソースの研究向けレンダラ

cvui:OpenCVのための軽量GUIライブラリ

ZBrushで仮面ライダー3号を造る 仮面編 横顔のシルエットをリファレンスに合わせる

Maya API Reference

Texturing & Modeling A Procedural ApproachをGoo...

Dlib:C++の機械学習ライブラリ

書籍『ジョージ・ルーカスのSFX工房』

ZBrushでゴジラ2001を作ってみる 姿勢の変更

geometry3Sharp:Unity C#で使えるポリゴン操作ライブラリ

『シン・ゴジラ』のコンセプトアニメーションのメイキング動画が公開された

Photoshopで作る怪獣特撮チュートリアル

PCA (主成分分析)

海外ドラマのChromaKey

Qlone:スマホのカメラで3Dスキャンできるアプリ

書籍『メイキング・オブ・ピクサー 創造力をつくった人々』を読んだ

CGALDotNet:計算幾何学ライブラリ CGALのC#ラッパー

ラクガキの立体化 胴体の追加

コメント