写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

コンピュータビジョンの技術マップ

ZBrushでアヴァン・ガメラを作ってみる おでこ(？)のバ...

ZBrushで人型クリーチャー

openMVG：複数視点画像から3次元形状を復元するライブラ...

MPC社によるゴジラ(2014)のVFXブレイクダウン

3Dスキャンしたテクスチャから照明を除去するUnityツール...

TensorFlowでCGを微分できる『TensorFlow...

VGGT：マルチビュー・フィードフォワード型3Dビジョン基盤...

Kinect for Windows v2の日本価格決定

UnityでARKit2.0

OpenGVの用語

ラクガキの立体化 進捗

ZBrushでゴジラ2001を作ってみる 側頭部のボリューム...

シン・ゴジラのファンアート

OpenMesh：オープンソースの３Dメッシュデータライブラ...

書籍『The Art of Mystical Beasts』...

Pix2Pix：CGANによる画像変換

ラクガキの立体化 目標設定

Geogram：C++の3D幾何アルゴリズムライブラリ

映画『ジュラシック・ワールド／炎の王国』のVFXブレイクダウ...

ZBrushでアマビエを作る その2

OpenCV 3.1のsfmモジュールのビルド再び

ラクガキの立体化 胴体の追加

Caffe：読みやすくて高速なディープラーニングのフレームワ...

Physics Forests：機械学習で流体シミュレーショ...

ZBrushからBlenderへモデルをインポート

ポリゴンジオメトリ処理ライブラリ『pmp-library (...

Super Resolution：OpenCVの超解像処理モ...

Point Cloud Utils：Pythonで3D点群・...

Adobeの手振れ補正機能『ワープスタビライザー』の秘密

グローバルイルミネーションに手を出す前に、やり残したことがあ...

機械学習手法『Random Forest』

顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト

『ローグ・ワン/スター・ウォーズ・ストーリー』のVFXブレイ...

OpenCVでカメラ画像から自己位置認識 (Visual O...

イタリアの自動車ブランドFiatとゴジラがコラボしたCMのメ...

2D→3D復元技術で使われる用語まとめ

Point Cloud Consortiumのセミナー「3D...

映画『ミュータント・タートルズ』を観てきた

OpenCV バージョン4がリリースされた！

ZBrushトレーニング

画像認識による位置情報取得 - Semi-Direct Mo...

コメント