写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

UnityでTweenアニメーションを実装できる3種類の無料...

顔画像処理技術の過去の研究

Unreal Engine Tokyo MeetUp!へ行っ...

Ambient Occlusionを解析的に求める

2012のメイキングまとめ(途中)

CGレンダラ研究開発のためのフレームワーク『Lightmet...

UnityのTransformクラスについて調べてみた

Deep Fluids：流体シミュレーションをディープラーニ...

写真から3Dメッシュの生成・編集ができる無料ツール『Auto...

ZBrushでアヴァン・ガメラを作ってみる 腕の作り込み

SculptrisとBlenderで作ったGodzilla ...

GoogleのDeep Learning論文

自前のShaderがおかしい件

BlenderでPhotogrammetryできるアドオン

プロシージャル手法に特化した本が出てるみたい(まだ買わないけ...

ZBrush用トポロジー転送プラグイン『ZWrap Plug...

映画『ブレードランナー 2049』のVFX

Physically Based Rendering

世界一下品なクマと世界一紳士なクマ

ヒーローに変身なりきりアーケードゲーム『ナレルンダー』

ZBrushで仮面ライダー3号を造る 仮面編 DynaMes...

Dlib：C++の機械学習ライブラリ

iPadをハンディ3Dスキャナにするガジェット『iSense...

TensorSpace.js：ニューラルネットワークの構造を...

書籍『メイキング・オブ・ピクサー 創造力をつくった人々』を読...

顔追跡による擬似3D表示『Dynamic Perspecti...

Paul Debevec

フリーのUV展開ツール Roadkill UV Tool

デザインのリファイン再び

Caffe：読みやすくて高速なディープラーニングのフレームワ...

ZBrushでアヴァン・ガメラを作ってみる モールドの彫り込...

OpenCVのfindEssentialMat関数を使ったサ...

ZBrush 2021.6のMesh from Mask機能...

ラクガキの立体化 モールドの追加

ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調...

WebGL開発に関する情報が充実してきている

MRenderUtil::raytrace

hloc：SuperGlueで精度を向上させたSfM・Vis...

TensorFlowでCGを微分できる『TensorFlow...

ZBrushでゴジラ2001を作ってみる 目元だけ作り込んで...

第25回コンピュータビジョン勉強会＠関東に行って来た

フィーリングに基づくタマムシの質感表現

コメント