写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

海外ドラマのChromaKey

Cartographer：オープンソースのSLAMライブラリ

ZBrushの練習 手のモデリング

OpenCVの三角測量関数『cv::triangulatep...

ZBrushで仮面ライダーBLACK SUNを作る 頭部～バ...

デザインのリファイン再び

アニゴジ関連情報

プロシージャル手法に特化した本が出てるみたい(まだ買わないけ...

HTML5・WebGLベースのグラフィックスエンジン『Goo...

畳み込みニューラルネットワーク (CNN: Convolut...

OpenCV 3.1のsfmモジュールのビルド再び

『ローグ・ワン/スター・ウォーズ・ストーリー』"あのキャラク...

3DCG Meetup #4に行ってきた

Googleが画像解析旅行ガイドアプリのJetpac社を買収

ニューラルネットワークで画像分類

Unity ARKitプラグインサンプルのドキュメントを読む

PyTorch3D：3Dコンピュータービジョンライブラリ

YOLO (You Only Look Once)：ディープ...

Ambient Occlusionを解析的に求める

1枚の画像からマテリアルを作成できる無料ツール『Materi...

『PIXARのひみつ展』に行ってきた

MPC社によるゴジラ(2014)のVFXブレイクダウン

この連休でZBrushの スキルアップを…

自前Shaderの件 解決しました

『スター・ウォーズ/スカイウォーカーの夜明け』のVFXブレイ...

画像生成AI Stable Diffusionで遊ぶ

Paul Debevec

ドラマ『ファーストクラス』のモーショングラフィックス

OpenCVで平均顔を作るチュートリアル

映画から想像するVR・AR時代のGUIデザイン

ArUco：OpenCVベースのコンパクトなARライブラリ

Physics Forests：機械学習で流体シミュレーショ...

OpenCVの超解像(SuperResolution)モジュ...

顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト

ZBrushで人型クリーチャー

映画『ミュータント・タートルズ』を観てきた

cvui：OpenCVのための軽量GUIライブラリ

2012のメイキングまとめ(途中)

UnityのGlobal Illumination

UnityでARKit2.0

Mask R-CNN：ディープラーニングによる一般物体検出・...

オープンソースのロボットアプリケーションフレームワーク『RO...

コメント