写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

書籍『メイキング・オブ・ピクサー 創造力をつくった人々』を読...

Blender 2.8がついに正式リリース！

トランスフォーマー/ロストエイジのメイキング

OpenCVでiPhone6sのカメラをキャリブレーションす...

Paul Debevec

VGGT：マルチビュー・フィードフォワード型3Dビジョン基盤...

Mayaのプラグイン開発

『ハン・ソロ/スター・ウォーズ・ストーリー』のVFXブレイク...

Google Colaboratoryで遊ぶ準備

Mayaのシェーディングノードの区分

3Dスキャンに基づくプロシージャルフェイシャルアニメーション

OpenCVで顔のモーフィングを実装する

今年もSSII

ZBrushでアヴァン・ガメラを作ってみる 口内の微調整・身...

FCN (Fully Convolutional Netwo...

ラクガキの立体化 目標設定

シン・ゴジラのファンアート

PGGAN：段階的に解像度を上げて学習を進めるGAN

ZBrush 2018へのアップグレード

TensorFlowでCGを微分できる『TensorFlow...

続・ディープラーニングの資料

MPFB2：Blenderの人体モデリングアドオン

Human Generator：Blenderの人体生成アド...

Google製オープンソース機械学習ライブラリ『Tensor...

グローバルイルミネーションに手を出す前に、やり残したことがあ...

ZBrushのZScript入門

FreeMoCap Project：オープンソースのマーカー...

ZBrushでゴジラ2001を作ってみる 身体のアタリを作る

ManuelBastioniLAB：人体モデリングできるBl...

Unity ARKitプラグインサンプルのチュートリアルを読...

第20回 文化庁メディア芸術祭『3DCG表現と特撮の時代』

マイケル・ベイの動画の感覚

ニューラルネットワークで画像分類

Dlib：C++の機械学習ライブラリ

ZBrushのZmodelerとDynamic Subdiv...

書籍『OpenCV 3 プログラミングブック』を購入

Polyscope：3Dデータ操作用GUIライブラリ

フリーで使えるスカルプト系モデリングツール『Sculptri...

CGAN (Conditional GAN)：条件付き敵対的...

ハリウッド版「GAIKING」パイロット映像

FacebookがDeep learningツールの一部をオ...

OpenCVで顔のランドマークを検出する『Facemark ...

コメント