写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

Transformers ”Reference & Buli...

MPC社によるゴジラ(2014)のVFXブレイクダウン

ポリゴン用各種イテレータと関数セット

OpenCVで顔のランドマークを検出する『Facemark ...

ZBrushでアヴァン・ガメラを作ってみる モールドの彫り込...

UnityのAR FoundationでARKit 3

ゴジラ(2014)のディティール制作の舞台裏

『スター・ウォーズ フォースの覚醒』のVFXブレイクダウン ...

MB-Lab：Blenderの人体モデリングアドオン

BlenderのGeometry Nodeで遊ぶ

ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調...

Kinect for Windows v2の日本価格決定

WebGL開発に関する情報が充実してきている

Subsurface scatteringの動画

SegNet：ディープラーニングによるSemantic Se...

ドラマ『ファーストクラス』のモーショングラフィックス

Kaolin：3Dディープラーニング用のPyTorchライブ...

マジョーラ

SIGGRAPH ASIA 2009で学生ボランティア募集し...

ZBrushで仮面ライダー3号を造る 仮面編 PolyGro...

顔画像処理技術の過去の研究

ラクガキの立体化 1年半ぶりの続き

U-Net：ディープラーニングによるSemantic Seg...

ZBrushでアヴァン・ガメラを作ってみる

TensorFlowでCGを微分できる『TensorFlow...

ZBrushのUndo Historyをカメラ固定で動画化す...

映画『ブレードランナー 2049』のVFX

COLMAP：オープンソースのSfM・MVSツール

生物の骨格

fSpy：1枚の写真からカメラパラメーターを割り出すツール

Raytracing Wiki

顔モデリングのチュートリアル

ゴジラ(2014)のメイキング

映画『シン・ウルトラマン』 メイキング記事まとめ

続・ディープラーニングの資料

CGレンダラ研究開発のためのフレームワーク『Lightmet...

映画から想像するVR・AR時代のGUIデザイン

ZBrushで作った3Dモデルを立体視で確認できるVRアプリ...

PyTorch3D：3Dコンピュータービジョンライブラリ

映画『ミュータント・タートルズ』を観てきた

疑似3D写真が撮れるiPhoneアプリ『Seene』がアップ...

タダでRenderManを体験する方法

コメント