写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

OpenMVS：Multi-View Stereoによる3次...

ゴジラ三昧

SIGGRAPH論文へのリンクサイト

参考書

『スター・ウォーズ 最後のジェダイ』のVFXブレイクダウン ...

Texturing & Modeling A Pro...

ゴジラの造形

Zibra Liquids：Unity向け流体シミュレーショ...

MeshroomでPhotogrammetry

NeRF (Neural Radiance Fields)：...

リメイク版ロボコップスーツのメイキング

AndroidもopenGLも初心者さ (でもJavaは知っ...

『パシフィック・リム: アップライジング』のVFXブレイクダ...

SIGGRAPH Asia

ZBrushのUV MasterでUV展開

TeleSculptor：空撮動画からPhotogramme...

『ハン・ソロ/スター・ウォーズ・ストーリー』のVFXブレイク...

グローバルイルミネーションに手を出す前に、やり残したことがあ...

Polyscope：3Dデータ操作用GUIライブラリ

ZBrushでアヴァン・ガメラを作ってみる

Maya LTのQuick Rigを試す

SDカードサイズのコンピューター『Intel Edison』

WebGL開発に関する情報が充実してきている

Physically Based Rendering

粘土をこねるようなスカルプトモデリング

ZBrush用トポロジー転送プラグイン『ZWrap Plug...

3DCGのモデルを立体化するサービス

単純に遊びに行くのはだめなのか？

BGSLibrary：OpenCVベースの背景差分ライブラリ

ZBrushで作った3Dモデルを立体視で確認できるVRアプリ...

UnityのGameObjectの向きをScriptで制御す...

BSDF： (Bidirectional scatterin...

OpenCVの顔検出過程を可視化した動画

天体写真の3D動画

MRenderUtil::raytrace

タダでRenderManを体験する方法

ZBrushでアヴァン・ガメラを作ってみる 下アゴと頭部を作...

UnityでOpenCVを使うには？

顔画像処理技術の過去の研究

CGAN (Conditional GAN)：条件付き敵対的...

Siggraph Asia 2009 カンファレンスの詳細

書籍『開田裕治 怪獣イラストテクニック』

コメント