写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

UnityでPoint Cloudを表示する方法

ZBrushのZmodelerとDynamic Subdiv...

Leap MotionでMaya上のオブジェクトを操作できる...

海外ドラマのChromaKey

ZBrushトレーニング

トランスフォーマーロストエイジのメイキング

ZBrushのTranspose Masterでポーズを付け...

オープンソースのロボットアプリケーションフレームワーク『RO...

映画『ジュラシック・ワールド／炎の王国』のVFXブレイクダウ...

UnityのAR FoundationでARKit 3

ZBrushで仮面ライダー3号を造る 仮面編 横顔のシルエッ...

Unityをレンダラとして活用する

フィーリングに基づくタマムシの質感表現

ZBrushで手首のモデリングをリファイン

ZBrush4新機能ハイライト 3DCG CAMP 2010

ZBrushで仮面ライダー3号を造る 仮面編 ClipCur...

ZBrushで仮面ライダー3号を造る 仮面編 PolyGro...

UnrealCV：コンピュータビジョン研究のためのUnrea...

UnityのGlobal Illumination

SIGGRAPH 2020はオンライン開催

UnityでShaderの入力パラメータとして行列を渡す

OpenCV 3.3.0-RCでsfmモジュールをビルド

『PIXARのひみつ展』に行ってきた

第20回 文化庁メディア芸術祭『3DCG表現と特撮の時代』

TorchStudio：PyTorchのための統合開発環境と...

Unityの薄い本

GoB：ZBrushとBlenderを連携させるアドオン

FreeMoCap Project：オープンソースのマーカー...

OpenGVの用語

GoogleのDeep Learning論文

ZBrushでアヴァン・ガメラを作ってみる 甲羅の修正・脚の...

HD画質の無駄遣い その２

Physics Forests：機械学習で流体シミュレーショ...

OpenCVで動画の手ぶれ補正

ラクガキの立体化 3Dプリント注文

ZBrushで仮面ライダー3号を造る 仮面編 失敗のリカバー

書籍『ゼロから作るDeep Learning』で自分なりに学...

顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト

ZBrushでアヴァン・ガメラを作ってみる 脚のトゲの作り直...

PGGAN：段階的に解像度を上げて学習を進めるGAN

ZBrushで仮面ライダー3号を造る 仮面編 PolyGro...

コメント