写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

レンダラ制作はOpenGL とか DirectX を使わなく...

ZBrush 2018での作業環境を整える

AR (Augmented Reality)とDR (Dim...

Maya には3 種類のシェーダSDKがある？

Zibra Liquids：Unity向け流体シミュレーショ...

映画『ゴジラ-1.0』 メイキング情報まとめ

『ゴジラ キング・オブ・モンスターズ』のVFXブレイクダウン

写真から3Dメッシュの生成・編集ができる無料ツール『Auto...

Photo Bash：複数の写真を組み合わせて1枚のイラスト...

Regard3D：オープンソースのStructure fro...

adskShaderSDK

HTML5・WebGLベースのグラフィックスエンジン『Goo...

ZBrushでアヴァン・ガメラを作ってみる 甲羅のバランス調...

ZBrush 2018へのアップグレード

ZBrushでゴジラ2001を作ってみる 身体のバランスを探...

Mitsuba 2：オープンソースの物理ベースレンダラ

SIGGRAPH Asia

Rerun：マルチモーダルデータの可視化アプリとSDK

ArUco：OpenCVベースのコンパクトなARライブラリ

ZBrush 4R8 リリース！

DCGAN (Deep Convolutional GAN)...

CGレンダラ研究開発のためのフレームワーク『Lightmet...

『スター・ウォーズ 最後のジェダイ』のVFXブレイクダウン ...

CGALDotNet：計算幾何学ライブラリ CGALのC#ラ...

Point Cloud Libraryに動画フォーマットが追...

trimesh：PythonでポリゴンMeshを扱うライブラ...

Raytracing Wiki

Facebookの顔認証技術『DeepFace』

Unite 2014の動画

コンピュータビジョンの技術マップ

Physically Based Rendering

粘土をこねるようなスカルプトモデリング

ZBrushで仮面ライダー3号を造る 仮面編 PolyGro...

Kubric：機械学習用アノテーション付き動画生成パイプライ...

BlenderのPython環境にPyTorchをインストー...

BlenderのRigifyでリギング

Multi-View Environment：複数画像から3...

ZBrushのお勉強

RefineNet (Multi-Path Refineme...

ニューラルネットワークと深層学習

BlenderProc：Blenderで機械学習用の画像デー...

OpenCV 3.3.0 contribのsfmモジュールの...

コメント