写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

ジュラシック・パークのメイキング

畳み込みニューラルネットワーク (CNN: Convolut...

ラクガキの立体化

viser：Pythonで使える3D可視化ライブラリ

CNN Explainer：畳み込みニューラルネットワーク可...

プログラムによる景観の自動生成

ZBrushの作業環境を見直す

ZBrushでゴジラ2001を作ってみる 頭の概形作り

オープンソースの物理ベースレンダラ『Mitsuba』をMay...

ZBrushのUV MasterでUV展開

ZBrushでアヴァン・ガメラを作ってみる モールドの彫り込...

PythonでBlenderのAdd-on開発

映画から想像するVR・AR時代のGUIデザイン

Blender 2.8がついに正式リリース！

ベイズ推定とグラフィカルモデル

ニューラルネットワークで画像分類

TorchStudio：PyTorchのための統合開発環境と...

2018年に購入したiPad Proのその後

OpenMayaのPhongShaderクラス

Geogram：C++の3D幾何アルゴリズムライブラリ

OpenCVで顔のランドマークを検出する『Facemark ...

ニンテンドー3DSのGPU PICA200

OpenCV 3.3.0-RCでsfmモジュールをビルド

OpenGV：画像からカメラの3次元位置・姿勢を推定するライ...

GAN (Generative Adversarial Ne...

BlenderでPhotogrammetryできるアドオン

OpenAR：OpenCVベースのマーカーARライブラリ

ZBrushでアヴァン・ガメラを作ってみる 甲羅のバランス調...

BSDF： (Bidirectional scatterin...

3D復元技術の情報リンク集

SegNet：ディープラーニングによるSemantic Se...

ZBrush 4R7

ZBrushでアヴァン・ガメラを作ってみる おでこ(？)のバ...

素敵なパーティクル

Open3D：3Dデータ処理ライブラリ

機械学習について最近知った情報

TensorSpace.js：ニューラルネットワークの構造を...

OpenMVS：Multi-View Stereoによる3次...

CycleGAN：ドメイン関係を学習した画像変換

ZBrushで仮面ライダー3号を造る 仮面編 PolyGro...

Qlone：スマホのカメラで3Dスキャンできるアプリ

Google Earth用の建物を簡単に作れるツール Goo...

コメント