写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

ZBrushのキャンバスにリファレンス画像を配置する

BlenderProc：Blenderで機械学習用の画像デー...

映画『ゴジラ-1.0』 メイキング情報まとめ

HD画質の無駄遣い その２

U-Net：ディープラーニングによるSemantic Seg...

ヘッドマウントディスプレイとビジュアリゼーションの未来

素敵なパーティクル

CGAN (Conditional GAN)：条件付き敵対的...

UnityのGlobal Illumination

統計的な顔モデル

立体視を試してみた

FacebookがDeep learningツールの一部をオ...

ベイズ推定とグラフィカルモデル

画像生成AI Stable Diffusionで遊ぶ

Polyscope：3Dデータ操作用GUIライブラリ

After Effects全エフェクトの解説(6.5)

『スター・ウォーズ/スカイウォーカーの夜明け』のVFXブレイ...

ZBrushのTranspose Masterでポーズを付け...

顔モデリングのチュートリアル

ZBrushからBlenderへモデルをインポート

Mayaでリアルな布の質感を作るチュートリアル

ZBrushで仮面ライダー3号を造る 仮面編 PolyGro...

2012のメイキングまとめ(途中)

参考書

uGUI：Unityの新しいGUI作成システム

Kaolin：3Dディープラーニング用のPyTorchライブ...

Open3D：3Dデータ処理ライブラリ

WebGL開発に関する情報が充実してきている

グローバルイルミネーションに手を出す前に、やり残したことがあ...

OpenGV：画像からカメラの3次元位置・姿勢を推定するライ...

『PIXARのひみつ展』に行ってきた

OpenMVSのサンプルを動かしてみる

ZBrushでアヴァン・ガメラを作ってみる 口のバランス調整

GoogleのDeep Learning論文

Unreal Engineの薄い本

ZBrushでゴジラ2001を作ってみる 頭の概形作り

Caffe：読みやすくて高速なディープラーニングのフレームワ...

OpenCV3.3.0でsfmモジュールのビルドに成功！

ZBrushでアヴァン・ガメラを作ってみる 甲羅のバランス調...

MB-Lab：Blenderの人体モデリングアドオン

ニューラルネットワークと深層学習

adskShaderSDK

コメント