写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

ZBrushトレーニング

SIGGRAPH Asia

ZBrushでアヴァン・ガメラを作ってみる パーツ分割

トランスフォーマー ：リベンジのメイキング (デジタルドメイ...

PGGAN：段階的に解像度を上げて学習を進めるGAN

Physics Forests：機械学習で流体シミュレーショ...

Unityの薄い本

『スター・ウォーズ フォースの覚醒』のVFXブレイクダウン ...

Blender 2.81でIntel Open Image ...

Mayaでリアルな布の質感を作るチュートリアル

Alice Vision：オープンソースのPhotogram...

Phongの表現力パネェ 材質別のPhong Shader用...

天体写真の3D動画

Digital Emily Project：人間の顔をそっく...

映画『シン・仮面ライダー』 メイキング情報まとめ

頭蓋骨からの顔復元と進化過程の可視化

株式会社ヘキサドライブの研究室ページ

Regard3D：オープンソースのStructure fro...

Qlone：スマホのカメラで3Dスキャンできるアプリ

ZBrushで仮面ライダー3号を造る 仮面編 PolyGro...

OpenMesh：オープンソースの３Dメッシュデータライブラ...

生物の骨格

TensorSpace.js：ニューラルネットワークの構造を...

Unity MonoBehaviourクラスのオーバーライド...

Geogram：C++の3D幾何アルゴリズムライブラリ

書籍『The Art of Mystical Beasts』...

MPC社によるゴジラ(2014)のVFXブレイクダウン

ZBrushCoreのTransposeとGizmo 3D

Adobeの手振れ補正機能『ワープスタビライザー』の秘密

BlenderのRigifyでリギング

3D復元技術の情報リンク集

ZBrushのZmodelerとDynamic Subdiv...

BSDF： (Bidirectional scatterin...

OpenFace：Deep Neural Networkによ...

2012 昨日のクローズアップ現代を見た

Polyscope：3Dデータ操作用GUIライブラリ

Composition Rendering：Blenderに...

SIGGRAPH 2020はオンライン開催

MB-Lab：Blenderの人体モデリングアドオン

DUSt3R：3Dコンピュータービジョンの基盤モデル

ZScript

Blendify：コンピュータービジョン向けBlenderラ...

コメント