Digital Emily Project:人間の顔をそっくりそのままCGで復元する

これはもう2009年の話だけど、たまたまTEDのプレゼンを見つけたのでメモ代わりに。

このThe Digital Emily Projectは、アメリカの南カリフォルニア大学 ICT Graphics LabとイギリスのImage Metrics社の共同プロジェクトで、実在の人間をそっくりそのままCGで復元してデジタルダブル(CGの俳優)の可能性を示したもの。
女優のEmily O’BrienさんをLight Stageでスキャンして本人そっくりのCGアニメーションを作成した。

ポール・デベヴェック 「メイキング・オブ・デジタルエミリー」

TEDxUSCでコンピュータグラフィックスの第一人者であるポール・デベヴェックが、デジタルエミリーの背後にある観客の目を奪うような技術について解説します。何度の撮り直しにも応えられるコンピュータで作り出されたリアルな人の顔をご覧ください。



こちらがこの研究のデモ映像↓



当時は不気味の谷を越えたと言われたりしてたけど、今見るとどうでしょう。

南カリフォルニア大学のポール・デベヴェックと言えば、イメージベースドレンダリングで超有名だよね。マトリックスのあの360度回転する映像の背景のCGは彼の技術によるもの。



スパイダーマン2, 3(サムライミ監督のシリーズ)での人の肌の表現も彼のLight Stageによるもの。



イメージベースドレンダリングは、学生の頃に初めて学校のお金で買ったこの本でもかなりフィーチャーされてた気がする。



ちなみにこの本は、2000年までのレンダリングの研究の歴史が日本語で読めるのでお勧めです。

そしてImage Metrics社は、マーカーレスの顔のパフォーマンスキャプチャをしている会社らしい。





この頃から5年経ったけど、今はリアルタイムでこんなの描画できちゃう時代になったんだよね。



2023年 追記:今はもっとすごい↓
ポリ男からMetaHumanを作る
ポリ男をリファインしたのでポリ男のMeshからこのチュートリアル動画に従ってMetaHumanを作成してみよう↓作業に入る前に、作業の全体像と各工程で使うツールの関係を整理して把握しておこう。チュートリアル動画によると、 自作の顔Meshを...

関連記事

OpenCVで顔のモーフィングを実装する

3Dグラフィックスの入門書

ArUco:OpenCVベースのコンパクトなARライブラリ

Vancouver Film Schoolのデモリール

ヒーローに変身なりきりアーケードゲーム『ナレルンダー』

法線マップを用意してCanvas上でShadingするサンプ...

Javaで作られたオープンソースの3DCGレンダラ『Sunf...

『メカニックデザイナー 大河原邦男展』に行ってきた

Adobe MAX 2015

ZBrushでアヴァン・ガメラを作ってみる 脚のポーズ調整

ゴジラムービースタジオツアー

注文してた本が届いた

書籍『ジョージ・ルーカスのSFX工房』

世界ふしぎ発見!「特撮の神様 円谷英二の世界」

ZBrushでアヴァン・ガメラを作ってみる 下アゴと頭部を作...

『THE仮面ライダー展』を見てきた

ZBrushでアヴァン・ガメラを作ってみる 歯茎を別パーツへ...

Google製オープンソース機械学習ライブラリ『Tensor...

分業とコミュニケーション 情報伝達網の設計

『劇場版シティーハンター 〈新宿プライベート・アイズ〉』を観...

ラクガキの立体化 反省

3DCG Meetup #4に行ってきた

4K HDR『ガメラ3 邪神覚醒』

ZBrushでアヴァン・ガメラを作ってみる 歯を配置

画像認識による位置情報取得 - Semi-Direct Mo...

ポリ男をリファイン

Stanford Bunny

Paul Debevec

ディープラーニング

ZBrushでアヴァン・ガメラを作ってみる 甲羅の修正・脚の...

『ピクサー展』へ行ってきた

フルCGのウルトラマン!?

あの頃で止まった時間

Kubric:機械学習用アノテーション付き動画生成パイプライ...

書籍『メモの魔力』読了

顔のモデリング

ラクガキの立体化 モールドの追加

ZBrushのZmodelerとDynamic Subdiv...

ウルトラセブン 55周年

色んな三面図があるサイト

Kinect for Windows V2のプレオーダー開始

『ローグ・ワン/スター・ウォーズ・ストーリー』のVFXブレイ...

コメント