写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

Mayaのポリゴン分割ツールの進化

ZBrushでアヴァン・ガメラを作ってみる 頭頂部と首周りを...

openMVG：複数視点画像から3次元形状を復元するライブラ...

ゴジラ(2014)のメイキング

Adobe Photoshop CS5の新機能

書籍『ゼロから作るDeep Learning』で自分なりに学...

Blender 4.2以降のWindowsPortable版...

Unite 2014の動画

オープンソースのロボットアプリケーションフレームワーク『RO...

ZBrushのハードサーフェイス用ブラシ

COLMAP：オープンソースのSfM・MVSツール

ZBrushトレーニング

MFnDataとMFnAttribute

OpenGVのライブラリ構成

『ローグ・ワン/スター・ウォーズ・ストーリー』"あのキャラク...

CNN Explainer：畳み込みニューラルネットワーク可...

CGAN (Conditional GAN)：条件付き敵対的...

bpy-renderer：レンダリング用Pythonパッケー...

Unity ARKitプラグインサンプルのドキュメントを読む

Adobe MAX 2015

OpenCVの顔検出過程を可視化した動画

Autodesk Mementoでゴジラを3次元復元する

MVStudio：オープンソースのPhotogrammetr...

MetaHumanの頭部をBlenderで編集できるアドオン

スクラッチで既存のキャラクターを立体化したい

3Dスキャンしたテクスチャから照明を除去するUnityツール...

CycleGAN：ドメイン関係を学習した画像変換

ZBrushでアヴァン・ガメラを作ってみる 口内の微調整・身...

SSD (Single Shot Multibox Dete...

OpenGV：画像からカメラの3次元位置・姿勢を推定するライ...

OpenCV 3.1のsfmモジュールのビルド再び

素敵なパーティクル

Live CV：インタラクティブにComputer Visi...

clearcoat Shader

OpenCV 3.1とopencv_contribモジュール...

JavaによるCGプログラミング入門サイト (日本語)

第1回 3D勉強会＠関東『SLAMチュートリアル大会』

Faceshiftで表情をキャプチャしてBlender上でM...

Maya API Reference

Photoshopで作る怪獣特撮チュートリアル

OpenCVで顔のモーフィングを実装する

株式会社ヘキサドライブの研究室ページ

コメント