写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

Twitterで知ったんだけど、10月6日~8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです! Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

ZBrushでゴジラ2001を作ってみる 目元だけ作り込んでバランスを見る

ベイズ推定とグラフィカルモデル

UnityでTweenアニメーションを実装できる3種類の無料Asset

Physics Forests:機械学習で流体シミュレーションを近似する

プログラムによる景観の自動生成

Point Cloud Libraryに動画フォーマットが追加されるらしい

DCGAN (Deep Convolutional GAN):畳み込みニューラルネットワークによる敵...

ZBrushでアヴァン・ガメラを作ってみる 首回りの修正・脚の作り込み

PythonでMayaのShapeノードプラグインを作る

VCG Library:C++のポリゴン操作ライブラリ

DensePose:画像中の人物表面のUV座標を推定する

UnityでPoint Cloudを表示する方法

書籍『ゼロから作るDeep Learning』で自分なりに学ぶ

ZBrush 2021.6のMesh from Mask機能を使ってみる

レンダラ制作はOpenGL とか DirectX を使わなくてもできるんだぜ

Live CV:インタラクティブにComputer Visionコーディングができるツール

1枚の画像からマテリアルを作成できる無料ツール『Materialize』

海外ドラマのChromaKey

Maya API Reference

iPhone 3GSがますます欲しくなる動画

Unite 2014の動画

OpenCVでiPhone6sのカメラをキャリブレーションする

Unreal Engine Tokyo MeetUp!へ行ってきた

UnityのGameObjectの向きをScriptで制御する

PCA (主成分分析)

天体写真の3D動画

OpenCVでPhotoshopのプラグイン開発

画像認識による位置情報取得 - Semi-Direct Monocular Visual Odome...

OpenCV

CGAN (Conditional GAN):条件付き敵対的生成ネットワーク

ポリ男からMetaHumanを作る

ZBrushでカスタムUIを設定する

ZBrushで人型クリーチャー

HD画質の無駄遣い

Maya 2015から標準搭載されたMILA

布地のシワの法則性

Point Cloud Consortiumのセミナー「3D点群の未来」に行ってきたよ

日立のフルパララックス立体ディスプレイ

『ゴジラ キング・オブ・モンスターズ』のVFXブレイクダウン

ラクガキの立体化 1年半ぶりの続き

fSpy:1枚の写真からカメラパラメーターを割り出すツール

ZBrushでアヴァン・ガメラを作ってみる 甲羅のバランス調整

コメント