写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

ZBrushのキャンバスにリファレンス画像を配置する

Maya API Reference

マイケル・ベイの動画の感覚

ZBrushトレーニング

Regard3D：オープンソースのStructure fro...

ZBrushでアヴァン・ガメラを作ってみる 壊れたデータの救...

ZScript

映画から想像するVR・AR時代のGUIデザイン

Physically Based Rendering

Composition Rendering：Blenderに...

Unreal Engine 5の情報が公開された！

Russian3DScannerのトポロジー転送ツール『Wr...

UnityでShaderの入力パラメータとして行列を渡す

CNN Explainer：畳み込みニューラルネットワーク可...

ZBrushでアヴァン・ガメラを作ってみる 腕の作り込み

ZBrushでアヴァン・ガメラを作ってみる 頭頂部と首周りを...

立体視を試してみた

BlenderのPython環境にPyTorchをインストー...

PSPNet (Pyramid Scene Parsing ...

リアルタイム レイトレーシングAPI『DirectX Ray...

ZBrushでゴジラ2001を作ってみる 側頭部のボリューム...

ラクガキの立体化 モールドの追加

株式会社ヘキサドライブの研究室ページ

BGSLibrary：OpenCVベースの背景差分ライブラリ

ゴジラ(2014)のディティール制作の舞台裏

2012 昨日のクローズアップ現代を見た

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

ZBrush 2018での作業環境を整える

ZBrushで仮面ライダー3号を造る 仮面編 ClipCur...

ZBrushでゴジラ2001を作ってみる 姿勢の変更

マジョーラ

ZBrushでアヴァン・ガメラを作ってみる 口内の微調整・身...

Blender 4.2以降のWindowsPortable版...

Physics Forests：機械学習で流体シミュレーショ...

NeRF (Neural Radiance Fields)：...

CreativeCOW.net

DUSt3R：3Dコンピュータービジョンの基盤モデル

布地のシワの法則性

池袋パルコで3Dのバーチャルフィッティング『ウェアラブル ク...

2012のメイキングまとめ(途中)

オープンソースの物理ベースGIレンダラ『appleseed』

Stanford Bunny

コメント