写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

Twitterで知ったんだけど、10月6日~8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです! Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

iPhoneで3D写真が撮れるアプリ『seene』

FCN (Fully Convolutional Netwo...

OpenCVで動画の手ぶれ補正

ArUco:OpenCVベースのコンパクトなARライブラリ

Composition Rendering:Blenderに...

世界一下品なクマと世界一紳士なクマ

OpenAR:OpenCVベースのマーカーARライブラリ

BSDF: (Bidirectional scatterin...

Kinect for Windows V2のプレオーダー開始

UnityでLight Shaftを表現する

adskShaderSDK

OpenGVの用語

ZBrushでアヴァン・ガメラを作ってみる 甲羅の修正・脚の...

ZBrush 4R8 リリース!

映画『シン・仮面ライダー』 メイキング情報まとめ

アニゴジ関連情報

マイケル・ベイの動画の感覚

ZBrushで作った3Dモデルを立体視で確認できるVRアプリ...

Accord.NET Framework:C#で使える機械学...

BlenderProc:Blenderで機械学習用の画像デー...

openMVG:複数視点画像から3次元形状を復元するライブラ...

法線マップを用意してCanvas上でShadingするサンプ...

ZBrushでゴジラ2001を作ってみる 身体のシルエット出...

Physically Based Rendering

ZBrushでアヴァン・ガメラを作ってみる 頭頂部の作り込み...

Autodesk CompositeとAutodesk Ma...

Live CV:インタラクティブにComputer Visi...

紅葉 その4

MB-Lab:Blenderの人体モデリングアドオン

OpenCV 3.1から追加されたSfMモジュール

UnityのAR FoundationでARKit 3

OpenGVのライブラリ構成

映画『ジュラシック・ワールド』のVFXメイキング

ZBrushでメカ物を作るチュートリアル動画

ZBrushでアヴァン・ガメラを作ってみる 下半身のバランス...

ZBrushでアヴァン・ガメラを作ってみる 腕の作り込み

オープンソースのテクスチャマッピングシステム『Ptex』

OpenMesh:オープンソースの3Dメッシュデータライブラ...

PyTorch3D:3Dコンピュータービジョンライブラリ

ZBrushで仮面ライダー3号を造る 仮面編 リファレンス画...

ZBrushでアヴァン・ガメラを作ってみる 壊れたデータの救...

bpy-renderer:レンダリング用Pythonパッケー...

コメント