Digital Emily Project:人間の顔をそっくりそのままCGで復元する

これはもう2009年の話だけど、たまたまTEDのプレゼンを見つけたのでメモ代わりに。

このThe Digital Emily Projectは、アメリカの南カリフォルニア大学 ICT Graphics LabとイギリスのImage Metrics社の共同プロジェクトで、実在の人間をそっくりそのままCGで復元してデジタルダブル(CGの俳優)の可能性を示したもの。
女優のEmily O’BrienさんをLight Stageでスキャンして本人そっくりのCGアニメーションを作成した。

ポール・デベヴェック 「メイキング・オブ・デジタルエミリー」

TEDxUSCでコンピュータグラフィックスの第一人者であるポール・デベヴェックが、デジタルエミリーの背後にある観客の目を奪うような技術について解説します。何度の撮り直しにも応えられるコンピュータで作り出されたリアルな人の顔をご覧ください。


スポンサーリンク


スポンサーリンク


こちらがこの研究のデモ映像↓



当時は不気味の谷を越えたと言われたりしてたけど、今見るとどうでしょう。

南カリフォルニア大学のポール・デベヴェックと言えば、イメージベースドレンダリングで超有名だよね。マトリックスのあの360度回転する映像の背景のCGは彼の技術によるもの。



スパイダーマン2, 3(サムライミ監督のシリーズ)での人の肌の表現も彼のLight Stageによるもの。



イメージベースドレンダリングは、学生の頃に初めて学校のお金で買ったこの本でもかなりフィーチャーされてた気がする。



ちなみにこの本は、2000年までのレンダリングの研究の歴史が日本語で読めるのでお勧めです。

そしてImage Metrics社は、マーカーレスの顔のパフォーマンスキャプチャをしている会社らしい。





この頃から5年経ったけど、今はリアルタイムでこんなの描画できちゃう時代になったんだよね。



2023年 追記:今はもっとすごい↓
ポリ男からMetaHumanを作る
ポリ男をリファインしたのでポリ男のMeshからこのチュートリアル動画に従ってMetaHumanを作成してみよう↓作業に入る前に、作業の全体像と各工程で使うツールの関係を整理して把握しておこう。チュートリアル動画によると、 自作の顔Meshを...


スポンサーリンク

関連記事

第25回コンピュータビジョン勉強会@関東に行って来た

OpenCVでPhotoshopのプラグイン開発

プログラムによる景観の自動生成

UnityのAR FoundationでARKit 3

FacebookがDeep learningツールの一部をオープンソース化

ZBrushで仮面ライダー3号を造る 仮面編 ZRemesher

ベイズ推定とグラフィカルモデル

Unite 2014の動画

線画を遠近法で描く

ZBrushで基本となるブラシ

映画『シン・仮面ライダー』 メイキング情報まとめ

Adobe Photoshop CS5の新機能

『円谷英二展』で展示された初代ゴジラがソフビ化!

ZBrushで仮面ライダー3号を造る 仮面編 Dam Standardブラシでディティールを彫る

画像認識による位置情報取得 - Semi-Direct Monocular Visual Odome...

ZBrushのZmodelerとDynamic Subdivisionを学ぶ

顔モデリングのチュートリアル

Super Resolution:OpenCVの超解像処理モジュール

書籍『天才を殺す凡人』読了

疑似3D写真が撮れるiPhoneアプリ『Seene』がアップデートでついにフル3Dモデルが撮影できる...

『劇場版シティーハンター 〈新宿プライベート・アイズ〉』を観た

RefineNet (Multi-Path Refinement Network):ディープラーニン...

ZBrushでアヴァン・ガメラを作ってみる 甲羅の修正・脚の作り込み

恐竜造形の指南書

ZBrushでアヴァン・ガメラを作ってみる モールドの彫り込み・身体の形出し

ガワコス

スクラッチで既存のキャラクターを立体化したい

ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調整 その2

オープンソースの物理ベースレンダラ『Mitsuba』をMayaで使う

ニューラルネットワークで画像分類

CEDEC 3日目

Zbrushでメカ物を作るチュートリアル動画

ラクガキの立体化 分割ラインの変更・バランス調整

3Dモデルを立体視で確認できるVRアプリを作っている

Blender 2.81でIntel Open Image Denoiseを使う

仮面ライダー4号の最終話を観た

ポリゴン用各種イテレータと関数セット

Amazonプライム・ビデオで『仮面ライダーアマゾンズ』が配信開始

ZBrushでアヴァン・ガメラを作ってみる 爪とトゲを追加

注文してた本が届いた

イタリアの自動車ブランドFiatとゴジラがコラボしたCMのメイキング

フリーのUV展開ツール Roadkill UV Tool

コメント