写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

Kornia：微分可能なコンピュータービジョンライブラリ

Mask R-CNN：ディープラーニングによる一般物体検出・...

顔追跡による擬似3D表示『Dynamic Perspecti...

Cartographer：オープンソースのSLAMライブラリ

ZBrushで仮面ライダー3号を造る 仮面編

Point Cloud Utils：Pythonで3D点群・...

ZBrushでアヴァン・ガメラを作ってみる 歯を配置

ゴジラ(2014)のディティール制作の舞台裏

無料で使える人体3DCG作成ツール

ZBrushでゴジラ2001を作ってみる 身体のアタリを作る

ZBrushで手首のモデリングをリファイン

タマムシっぽい質感

OpenMayaRender

geometry3Sharp：Unity C#で使えるポリゴ...

Transformers ”Reference & Buli...

GoogleのDeep Learning論文

ゴジラ三昧

Photo Bash：複数の写真を組み合わせて1枚のイラスト...

OpenGVのライブラリ構成

トランスフォーマーロストエイジのメイキング

ZBrushでアヴァン・ガメラを作ってみる 下アゴの付け根を...

ZBrushでアヴァン・ガメラを作ってみる 頭頂部の作り込み...

Google Earth用の建物を簡単に作れるツール Goo...

Fast R-CNN：ディープラーニングによる一般物体検出手...

写真から3Dメッシュの生成・編集ができる無料ツール『Auto...

Open Shading Language (OSL)

ゴジラの造形

フリーのUV展開ツール Roadkill UV Tool

Google Colaboratoryで遊ぶ準備

GAN (Generative Adversarial Ne...

SIGGRAPH ASIA 2009で学生ボランティア募集し...

ジュラシック・パークのメイキング

ニンテンドー3DSのGPU PICA200

Accord.NET Framework：C#で使える機械学...

『パシフィック・リム: アップライジング』のVFXブレイクダ...

Unityをレンダラとして活用する

Siggraph Asia 2009 カンファレンスの詳細

Google製オープンソース機械学習ライブラリ『Tensor...

libigl：軽量なジオメトリ処理ライブラリ

Qlone：スマホのカメラで3Dスキャンできるアプリ

ZBrushでアヴァン・ガメラを作ってみる 脚のトゲの作り直...

ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始...

コメント