サイトアイコン NegativeMindException

Digital Emily Project:人間の顔をそっくりそのままCGで復元する

これはもう2009年の話だけど、たまたまTEDのプレゼンを見つけたのでメモ代わりに。

このThe Digital Emily Projectは、アメリカの南カリフォルニア大学 ICT Graphics LabとイギリスのImage Metrics社の共同プロジェクトで、実在の人間をそっくりそのままCGで復元してデジタルダブル(CGの俳優)の可能性を示したもの。
女優のEmily O’BrienさんをLight Stageでスキャンして本人そっくりのCGアニメーションを作成した。

ポール・デベヴェック 「メイキング・オブ・デジタルエミリー」

TEDxUSCでコンピュータグラフィックスの第一人者であるポール・デベヴェックが、デジタルエミリーの背後にある観客の目を奪うような技術について解説します。何度の撮り直しにも応えられるコンピュータで作り出されたリアルな人の顔をご覧ください。


スポンサーリンク



こちらがこの研究のデモ映像↓



当時は不気味の谷を越えたと言われたりしてたけど、今見るとどうでしょう。

南カリフォルニア大学のポール・デベヴェックと言えば、イメージベースドレンダリングで超有名だよね。マトリックスのあの360度回転する映像の背景のCGは彼の技術によるもの。



スパイダーマン2, 3(サムライミ監督のシリーズ)での人の肌の表現も彼のLight Stageによるもの。



イメージベースドレンダリングは、学生の頃に初めて学校のお金で買ったこの本でもかなりフィーチャーされてた気がする。



ちなみにこの本は、2000年までのレンダリングの研究の歴史が日本語で読めるのでお勧めです。

そしてImage Metrics社は、マーカーレスの顔のパフォーマンスキャプチャをしている会社らしい。





この頃から5年経ったけど、今はリアルタイムでこんなの描画できちゃう時代になったんだよね。



2023年 追記:今はもっとすごい↓



スポンサーリンク

関連記事

  • 映画『ジュラシック・ワールド』を観た
  • ZBrushで仮面ライダー3号を造る ベース編
  • 平成ガメラ
  • 1枚の画像からマテリアルを作成できる無料ツール『Materialize』
  • オープンソースの物理ベースレンダラ『Mitsuba』をMayaで使う
  • ArUco:OpenCVベースのコンパクトなARライブラリ
  • 仮面ライダークウガ 20周年
  • 顔追跡による擬似3D表示『Dynamic Perspective』
  • Unityで360度ステレオVR動画を作る
  • 粘土をこねるようなスカルプトモデリング
  • SegNet:ディープラーニングによるSemantic Segmentation手法
  • ポイントクラウドコンソーシアム
  • タダでRenderManを体験する方法
  • 書籍『3次元コンピュータビジョン計算ハンドブック』を購入
  • Dlib:C++の機械学習ライブラリ
  • ポリゴン用各種イテレータと関数セット
  • mentalrayのSubsurface Scattering Shader『misss_fast_...
  • COLMAP:オープンソースのSfM・MVSツール
  • ZBrushで仮面ライダー3号を造る 仮面編 DynaMesh
  • Unity ARKitプラグインサンプルのチュートリアルを読む
  • 書籍『AI vs. 教科書が読めない子どもたち』読了
  • 情報の編集
  • ハリウッド版「GAIKING」パイロット映像
  • U-Net:ディープラーニングによるSemantic Segmentation手法
  • Kubric:機械学習用アノテーション付き動画生成パイプライン
  • Google製オープンソース機械学習ライブラリ『TensorFlow』のWindows版が公開された
  • SculptrisとBlenderで作ったGodzilla 2014 (Fan Made)
  • 統計的な顔モデル
  • Adobeの手振れ補正機能『ワープスタビライザー』の秘密
  • Polyscope:3Dデータ操作用GUIライブラリ
  • ゴジラ(2014)のメイキング
  • BSDF: (Bidirectional scattering distribution funct...
  • 3Dグラフィックスの入門書
  • ZBrushのTranspose Masterでポーズを付ける
  • ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始める
  • OpenMVSのサンプルを動かしてみる
  • Rerun:マルチモーダルデータの可視化アプリとSDK
  • ファインモールド 1/144 ミレニアム・ファルコンの制作再開
  • Maya 2015から標準搭載されたMILA
  • 映画『シン・仮面ライダー』 メイキング情報まとめ
  • OpenCV3.3.0でsfmモジュールのビルドに成功!
  • Deep Fluids:流体シミュレーションをディープラーニングで近似する
  • モバイルバージョンを終了