Digital Emily Project:人間の顔をそっくりそのままCGで復元する

これはもう2009年の話だけど、たまたまTEDのプレゼンを見つけたのでメモ代わりに。

このThe Digital Emily Projectは、アメリカの南カリフォルニア大学 ICT Graphics LabとイギリスのImage Metrics社の共同プロジェクトで、実在の人間をそっくりそのままCGで復元してデジタルダブル(CGの俳優)の可能性を示したもの。
女優のEmily O’BrienさんをLight Stageでスキャンして本人そっくりのCGアニメーションを作成した。

ポール・デベヴェック 「メイキング・オブ・デジタルエミリー」

TEDxUSCでコンピュータグラフィックスの第一人者であるポール・デベヴェックが、デジタルエミリーの背後にある観客の目を奪うような技術について解説します。何度の撮り直しにも応えられるコンピュータで作り出されたリアルな人の顔をご覧ください。



こちらがこの研究のデモ映像↓



当時は不気味の谷を越えたと言われたりしてたけど、今見るとどうでしょう。

南カリフォルニア大学のポール・デベヴェックと言えば、イメージベースドレンダリングで超有名だよね。マトリックスのあの360度回転する映像の背景のCGは彼の技術によるもの。



スパイダーマン2, 3(サムライミ監督のシリーズ)での人の肌の表現も彼のLight Stageによるもの。



イメージベースドレンダリングは、学生の頃に初めて学校のお金で買ったこの本でもかなりフィーチャーされてた気がする。



ちなみにこの本は、2000年までのレンダリングの研究の歴史が日本語で読めるのでお勧めです。

そしてImage Metrics社は、マーカーレスの顔のパフォーマンスキャプチャをしている会社らしい。





この頃から5年経ったけど、今はリアルタイムでこんなの描画できちゃう時代になったんだよね。



2023年 追記:今はもっとすごい↓
ポリ男からMetaHumanを作る
ポリ男をリファインしたのでポリ男のMeshからこのチュートリアル動画に従ってMetaHumanを作成してみよう↓作業に入る前に、作業の全体像と各工程で使うツールの関係を整理して把握しておこう。チュートリアル動画によると、 自作の顔Meshを...

関連記事

イタリアの自動車ブランドFiatとゴジラがコラボしたCMのメ...

PGGAN:段階的に解像度を上げて学習を進めるGAN

ニューラルネットワークと深層学習

書籍『天才を殺す凡人』読了

映画『ドラえもん のび太と雲の王国』を観た

OpenCV3.3.0でsfmモジュールのビルドに成功!

顔モデリングのチュートリアル

酒井ゆうじ 造形コレクション『ゴジラ1999』を購入

リメイクコンテンツにお金を払う歳になった

ZBrushでアヴァン・ガメラを作ってみる 口内の微調整・身...

『きたぞ!われらのウルトラマン』を観てきた

ZBrushでアヴァン・ガメラを作ってみる 爪とトゲを追加

ゴジラ(2014)のメイキング

Point Cloud Consortiumのセミナー「3D...

ZBrushでアヴァン・ガメラを作ってみる 脚のトゲの作り直...

マジョーラ

顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト

MeshroomでPhotogrammetry

Structure from Motion (多視点画像から...

HerokuでMEAN stack

ラクガキの立体化 3Dプリント注文

機械学習手法『Random Forest』

2025年3月 振り返り

GoB:ZBrushとBlenderを連携させるアドオン

機械学習について最近知った情報

ブログをWordpressに引っ越して1周年

トランスフォーマーロストエイジのメイキング

UnityのAR FoundationでARKit 3

ポリ男をリファイン

Caffe:読みやすくて高速なディープラーニングのフレームワ...

OpenGV:画像からカメラの3次元位置・姿勢を推定するライ...

映画『ジュラシック・ワールド』を観た

MFnMeshクラスのsplit関数

映画『ゴジラ-1.0』を観た (ネタバレ無し)

Transformers ”Reference & Buli...

CGWORLD CHANNEL 第21回ニコ生配信は『シン・...

Multi-View Environment:複数画像から3...

OpenCVで動画の手ぶれ補正

ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始...

CNN Explainer:畳み込みニューラルネットワーク可...

トランスフォーマーの変形パターンを覚えるのは楽しいと思うんだ

ZBrushでアヴァン・ガメラを作ってみる パーツ分割

コメント