写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

Twitterで知ったんだけど、10月6日~8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです! Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

BlenderのGeometry Nodeで遊ぶ

ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始...

Maya 2015から標準搭載されたMILA

イタリアの自動車ブランドFiatとゴジラがコラボしたCMのメ...

Regard3D:オープンソースのStructure fro...

ZBrushで仮面ライダー3号を造る 仮面編 リファレンス画...

Houdiniのライセンスの種類

書籍『ゼロから作るDeep Learning』で自分なりに学...

UnityのGameObjectの向きをScriptで制御す...

Google Earth用の建物を簡単に作れるツール Goo...

Point Cloud Libraryに動画フォーマットが追...

MVStudio:オープンソースのPhotogrammetr...

顔のモデリング

Open Shading Language (OSL)

CGのためのディープラーニング

ゴジラ(2014)のディティール制作の舞台裏

Open3D:3Dデータ処理ライブラリ

Stanford Bunny

FacebookがDeep learningツールの一部をオ...

trimesh:PythonでポリゴンMeshを扱うライブラ...

実写と実写の合成時の色の馴染ませテクニック

ラクガキの立体化 進捗

トランスフォーマーロストエイジのメイキング

顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト

GAN (Generative Adversarial Ne...

疑似3D写真が撮れるiPhoneアプリ『Seene』がアップ...

3DCGのモデルを立体化するサービス

今年もSSII

株式会社ヘキサドライブの研究室ページ

Unityをレンダラとして活用する

CGALDotNet:計算幾何学ライブラリ CGALのC#ラ...

ハリウッド版「GAIKING」パイロット映像

MPC社によるゴジラ(2014)のVFXブレイクダウン

ZBrushのハードサーフェイス用ブラシ

ZBrushのZScript入門

『PIXARのひみつ展』に行ってきた

Mayaのシェーディングノードの区分

iPhone 3GSがますます欲しくなる動画

Mayaのプラグイン開発

『スター・ウォーズ/スカイウォーカーの夜明け』のVFXブレイ...

OpenFace:Deep Neural Networkによ...

ZBrushのZmodelerとDynamic Subdiv...

コメント