写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

Fast R-CNN：ディープラーニングによる一般物体検出手...

素敵なパーティクル

CGAN (Conditional GAN)：条件付き敵対的...

SDカードサイズのコンピューター『Intel Edison』

ZBrush用トポロジー転送プラグイン『ZWrap Plug...

OpenCVでPhotoshopのプラグイン開発

ZBrushで仮面ライダー3号を造る 仮面編 ZRemesh...

Unite 2014の動画

BGSLibrary：OpenCVベースの背景差分ライブラリ

Russian3DScannerのトポロジー転送ツール『Wr...

Stanford Bunny

UnityのAR FoundationでARKit 3

OpenCVでカメラ画像から自己位置認識 (Visual O...

ZBrushのZScript入門

UnityでARKit2.0

Blender 2.81でIntel Open Image ...

粘土をこねるようなスカルプトモデリング

ベイズ推定とグラフィカルモデル

デザインのリファイン再び

Unityをレンダラとして活用する

Kubric：機械学習用アノテーション付き動画生成パイプライ...

TensorFlowでCGを微分できる『TensorFlow...

OpenMVS：Multi-View Stereoによる3次...

ゴジラ(2014)のメイキング

MRenderUtil::raytrace

OpenCVの三角測量関数『cv::triangulatep...

『ピクサー展』へ行ってきた

Googleが画像解析旅行ガイドアプリのJetpac社を買収

Raytracing Wiki

第25回コンピュータビジョン勉強会＠関東に行って来た

『ゴジラ キング・オブ・モンスターズ』のVFXブレイクダウン

WebGL開発に関する情報が充実してきている

PolyPaint

ポリ男からMetaHumanを作る

MB-Lab：Blenderの人体モデリングアドオン

Theia：オープンソースのStructure from M...

OpenCV 3.3.0-RCでsfmモジュールをビルド

fSpy：1枚の写真からカメラパラメーターを割り出すツール

画像生成AI Stable Diffusionで遊ぶ

PythonでBlenderのAdd-on開発

『スター・ウォーズ/スカイウォーカーの夜明け』のVFXブレイ...

顔モデリングのチュートリアル

コメント