写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

OpenMVSのサンプルを動かしてみる

ArUco：OpenCVベースのコンパクトなARライブラリ

FCN (Fully Convolutional Netwo...

リアルタイム レイトレーシングAPI『DirectX Ray...

ZBrushでアヴァン・ガメラを作ってみる 腕の作り込み

SIGGRAPH Asia

映画から想像するVR・AR時代のGUIデザイン

ZBrushの作業環境を見直す

Point Cloud Utils：Pythonで3D点群・...

統計的な顔モデル

ZBrushで人型クリーチャー

PyTorch3D：3Dコンピュータービジョンライブラリ

この連休でZBrushの スキルアップを…

ZBrushでメカ物を作るチュートリアル動画

FreeMoCap Project：オープンソースのマーカー...

Python for Unity：UnityEditorでP...

3Dモデルを立体視で確認できるVRアプリを作っている

Regard3D：オープンソースのStructure fro...

海外ドラマのChromaKey

fSpy：1枚の写真からカメラパラメーターを割り出すツール

Fast R-CNN：ディープラーニングによる一般物体検出手...

『ピクサー展』へ行ってきた

OpenCV 3.1から追加されたSfMモジュール

OpenCV 3.3.0 contribのsfmモジュールの...

CGALDotNet：計算幾何学ライブラリ CGALのC#ラ...

DUSt3R：3Dコンピュータービジョンの基盤モデル

粘土をこねるようなスカルプトモデリング

Blender 4.2以降のWindowsPortable版...

3D Gaussian Splatting：リアルタイム描画...

トランスフォーマー/ロストエイジのメイキング

Unite 2014の動画

Shader.jp：リアルタイム3DCG技術をあつかうサイト

Maya LTのQuick Rigを試す

顔モデリングのチュートリアル

UnityでARKit2.0

MPC社によるゴジラ(2014)のVFXブレイクダウン

Unreal Engine 5の情報が公開された！

OpenGV：画像からカメラの3次元位置・姿勢を推定するライ...

ZBrush 4R8 リリース！

CGAN (Conditional GAN)：条件付き敵対的...

デザインのリファイン再び

OpenCV 3.1とopencv_contribモジュール...

コメント