写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

海外ドラマのChromaKey

ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調...

ArUco：OpenCVベースのコンパクトなARライブラリ

UnityでARKit2.0

Houdiniのライセンスの種類

テスト

ZBrushで仮面ライダー3号を造る 仮面編 横顔のシルエッ...

OpenCVの三角測量関数『cv::triangulatep...

SegNet：ディープラーニングによるSemantic Se...

Unite 2014の動画

リアルタイム レイトレーシングAPI『DirectX Ray...

ZBrushの作業環境を見直す

オープンソースのロボットアプリケーションフレームワーク『RO...

Fast R-CNN：ディープラーニングによる一般物体検出手...

Deep Fluids：流体シミュレーションをディープラーニ...

ZBrushでゴジラ2001を作ってみる 姿勢の変更

FreeMoCap Project：オープンソースのマーカー...

SIGGRAPH Asia

OpenFace：Deep Neural Networkによ...

Faster R-CNN：ディープラーニングによる一般物体検...

OpenCVの超解像(SuperResolution)モジュ...

Unity MonoBehaviourクラスのオーバーライド...

ZBrush 2018での作業環境を整える

ラクガキの立体化 1年半ぶりの続き

HD画質の無駄遣い その２

Shader.jp：リアルタイム3DCG技術をあつかうサイト

R-CNN (Regions with CNN featur...

ZBrushでアヴァン・ガメラを作ってみる 甲羅のバランス調...

素敵なパーティクル

OpenCV 3.1のsfmモジュールを試す

OpenCVの顔検出過程を可視化した動画

オープンソースのテクスチャマッピングシステム『Ptex』

ディープラーニング

Google Colaboratoryで遊ぶ準備

トランスフォーマーの変形パターンを覚えるのは楽しいと思うんだ

顔のモデリング

Kinect for Windows V2のプレオーダー開始

Physically Based Rendering

デザインのリファイン再び

Cartographer：オープンソースのSLAMライブラリ

CGのためのディープラーニング

ラクガキの立体化 胴体の追加

コメント