Digital Emily Project:人間の顔をそっくりそのままCGで復元する

これはもう2009年の話だけど、たまたまTEDのプレゼンを見つけたのでメモ代わりに。

このThe Digital Emily Projectは、アメリカの南カリフォルニア大学 ICT Graphics LabとイギリスのImage Metrics社の共同プロジェクトで、実在の人間をそっくりそのままCGで復元してデジタルダブル(CGの俳優)の可能性を示したもの。
女優のEmily O’BrienさんをLight Stageでスキャンして本人そっくりのCGアニメーションを作成した。

ポール・デベヴェック 「メイキング・オブ・デジタルエミリー」

TEDxUSCでコンピュータグラフィックスの第一人者であるポール・デベヴェックが、デジタルエミリーの背後にある観客の目を奪うような技術について解説します。何度の撮り直しにも応えられるコンピュータで作り出されたリアルな人の顔をご覧ください。



こちらがこの研究のデモ映像↓



当時は不気味の谷を越えたと言われたりしてたけど、今見るとどうでしょう。

南カリフォルニア大学のポール・デベヴェックと言えば、イメージベースドレンダリングで超有名だよね。マトリックスのあの360度回転する映像の背景のCGは彼の技術によるもの。



スパイダーマン2, 3(サムライミ監督のシリーズ)での人の肌の表現も彼のLight Stageによるもの。



イメージベースドレンダリングは、学生の頃に初めて学校のお金で買ったこの本でもかなりフィーチャーされてた気がする。



ちなみにこの本は、2000年までのレンダリングの研究の歴史が日本語で読めるのでお勧めです。

そしてImage Metrics社は、マーカーレスの顔のパフォーマンスキャプチャをしている会社らしい。





この頃から5年経ったけど、今はリアルタイムでこんなの描画できちゃう時代になったんだよね。



2023年 追記:今はもっとすごい↓
ポリ男からMetaHumanを作る
ポリ男をリファインしたのでポリ男のMeshからこのチュートリアル動画に従ってMetaHumanを作成してみよう↓作業に入る前に、作業の全体像と各工程で使うツールの関係を整理して把握しておこう。チュートリアル動画によると、 自作の顔Meshを...

関連記事

HD画質の無駄遣い

OpenCV 3.1とopencv_contribモジュール...

ZBrushでUndo Historyを動画に書き出す

bpy-renderer:レンダリング用Pythonパッケー...

Javaで作られたオープンソースの3DCGレンダラ『Sunf...

ZBrushでアヴァン・ガメラを作ってみる 爪とトゲを追加

トランスフォーマーの変形パターンを覚えるのは楽しいと思うんだ

映画『ハン・ソロ/スター・ウォーズ・ストーリー』を観た (ネ...

ゴジラ トレーディングバトル

ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始...

遺伝子検査で自己分析

オープンソースのテクスチャマッピングシステム『Ptex』

Unity MonoBehaviourクラスのオーバーライド...

PolyPaint

Siggraph Asia 2009 カンファレンスの詳細

ZBrushのお勉強

フォトンの放射から格納までを可視化した動画

2015年10月21日

2023年の振り返り その2 仕事編

Unreal Engine Tokyo MeetUp!へ行っ...

平成ガメラ

2024年8月 振り返り

Google Colaboratoryで遊ぶ準備

Profilograph

Kornia:微分可能なコンピュータービジョンライブラリ

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

UnityでLight Shaftを表現する

OpenCVで動画の手ぶれ補正

ZBrushでアヴァン・ガメラを作ってみる 口内の微調整・身...

PythonでBlenderのAdd-on開発

かっこいい大人にはなれなかったけど

『ゴジラ キング・オブ・モンスターズ』のVFXブレイクダウン

映画『ドラゴンボール超 ブロリー』を観た (ややネタバレ)

OpenCVでカメラ画像から自己位置認識 (Visual O...

ZBrushで人型クリーチャー

Blender 2.81でIntel Open Image ...

ZBrush 2018での作業環境を整える

顔のモデリング

Dlib:C++の機械学習ライブラリ

書籍『ゼロから作るDeep Learning』で自分なりに学...

機動武闘伝Gガンダム

分業とコミュニケーション 情報伝達網の設計

コメント