写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

Iridescence：プロトタイピング向け軽量3D可視化ラ...

fSpy：1枚の写真からカメラパラメーターを割り出すツール

Photo Bash：複数の写真を組み合わせて1枚のイラスト...

『シン・ゴジラ』のコンセプトアニメーションのメイキング動画が...

タマムシっぽい質感

CGのためのディープラーニング

ラクガキの立体化 モールドの追加

ZBrushと液晶ペンタブレットでドラゴンをモデリングするチ...

PeopleSansPeople：機械学習用の人物データをU...

uGUI：Unityの新しいGUI作成システム

オープンソースのネットワーク可視化ソフトウェアプラットフォー...

BGSLibrary：OpenCVベースの背景差分ライブラリ

ZBrushで仮面ライダー3号を造る 仮面編 Dam Sta...

SDカードサイズのコンピューター『Intel Edison』

OpenCV 3.1とopencv_contribモジュール...

Siggraph Asia 2009 カンファレンスの詳細

Mayaのプラグイン開発

OpenCVでiPhone6sのカメラをキャリブレーションす...

WebGL開発に関する情報が充実してきている

単純に遊びに行くのはだめなのか？

ZBrushでアヴァン・ガメラを作ってみる パーツ分割

SSD (Single Shot Multibox Dete...

3Dグラフィックスの入門書

ZBrushのZmodelerとDynamic Subdiv...

Leap MotionでMaya上のオブジェクトを操作できる...

オープンソースの物理ベースレンダラ『Mitsuba』をMay...

CycleGAN：ドメイン関係を学習した画像変換

TensorSpace.js：ニューラルネットワークの構造を...

オープンソースのテクスチャマッピングシステム『Ptex』

Qlone：スマホのカメラで3Dスキャンできるアプリ

Multi-View Environment：複数画像から3...

Kornia：微分可能なコンピュータービジョンライブラリ

2D→3D復元技術で使われる用語まとめ

生物の骨格

HTML5・WebGLベースのグラフィックスエンジン『Goo...

3Dスキャンしたテクスチャから照明を除去するUnityツール...

TensorFlowでCGを微分できる『TensorFlow...

ハリウッド版「GAIKING」パイロット映像

ZBrushでアヴァン・ガメラを作ってみる 爪とトゲを追加

PythonでBlenderのAdd-on開発

ファンの力

Theia：オープンソースのStructure from M...

コメント