写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

openMVGをWindows10 Visual Studi...

Paul Debevec

ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調...

OpenCVで平均顔を作るチュートリアル

Alice Vision：オープンソースのPhotogram...

自前のShaderがおかしい件

Live CV：インタラクティブにComputer Visi...

Raytracing Wiki

ZBrushでゴジラ2001を作ってみる 身体のバランスを探...

CEDEC 3日目

『ピクサー展』へ行ってきた

CLO：服飾デザインツール

フリーで使えるスカルプト系モデリングツール『Sculptri...

リアルタイム レイトレーシングAPI『DirectX Ray...

オープンソースのテクスチャマッピングシステム『Ptex』

オープンソースのロボットアプリケーションフレームワーク『RO...

サンプルコードにも間違いはある？

U-Net：ディープラーニングによるSemantic Seg...

MFnDataとMFnAttribute

iPhoneで3D写真が撮れるアプリ『seene』

OpenCVの超解像(SuperResolution)モジュ...

Pix2Pix：CGANによる画像変換

ポリ男からMetaHumanを作る

MeshLab：3Dオブジェクトの確認・変換に便利なフリーウ...

プロシージャル手法に特化した本が出てるみたい(まだ買わないけ...

ZBrushで作った3Dモデルを立体視で確認できるVRアプリ...

ZBrushでアヴァン・ガメラを作ってみる

ZBrushのUndo Historyをカメラ固定で動画化す...

ZBrush 4R7

ZBrushでゴジラ2001を作ってみる 目元だけ作り込んで...

Faster R-CNN：ディープラーニングによる一般物体検...

BlenderProc：Blenderで機械学習用の画像デー...

書籍『ゼロから作るDeep Learning』で自分なりに学...

参考になりそうなサイト

ZBrushで仮面ライダー3号を造る ベース編

TensorSpace.js：ニューラルネットワークの構造を...

PythonでBlenderのAdd-on開発

CGAN (Conditional GAN)：条件付き敵対的...

OpenCV

ガメラ生誕50周年

SSII2014 チュートリアル講演会の資料

2012 昨日のクローズアップ現代を見た

コメント