写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

Twitterで知ったんだけど、10月6日~8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです! Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

CGAN (Conditional GAN):条件付き敵対的生成ネットワーク

布のモデリング

アニゴジ関連情報

3DCGのモデルを立体化するサービス

ZBrushで仮面ライダー3号を造る 仮面編 PolyGroup作成に再挑戦

ポイントクラウドコンソーシアム

ラクガキの立体化 胴体の追加

生物の骨格

OpenGVのライブラリ構成

OpenCVの三角測量関数『cv::triangulatepoints』

FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ

ZBrushでアヴァン・ガメラを作ってみる 脚のトゲの作り直し

FCN (Fully Convolutional Network):ディープラーニングによるSema...

Photogrammetry (写真測量法)

ZBrushでアヴァン・ガメラを作ってみる 下アゴと頭部を作り込む

ラクガキの立体化 反省

機械学習について最近知った情報

UnityでARKit2.0

Paul Debevec

ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調整

OpenCV バージョン4がリリースされた!

Stanford Bunny

『スター・ウォーズ フォースの覚醒』のVFXブレイクダウン まとめ

ちょっと凝り過ぎなWebキャンペーン:全日本バーベイタム選手権 (MITSUBISHI KAGAKU...

adskShaderSDK

ZBrushで仮面ライダー3号を造る 仮面編 Dam Standardブラシでディティールを彫る

MPC社によるゴジラ(2014)のVFXブレイクダウン

顔モデリングのチュートリアル

Unityで360度ステレオVR動画を作る

BlenderのGeometry Nodeで遊ぶ

UnityでOpenCVを使うには?

SIGGRAPH ASIA 2009で学生ボランティア募集してるみたい

ZBrushでアヴァン・ガメラを作ってみる 首回りの修正・脚の作り込み

Texturing & Modeling A Procedural ApproachをGoo...

ラクガキの立体化

ラクガキの立体化 分割ラインの変更・バランス調整

映画『ゴジラ-1.0』 メイキング情報まとめ

Cartographer:オープンソースのSLAMライブラリ

色んな三面図があるサイト

ZBrush 4R8 リリース!

ZBrushのハードサーフェイス用ブラシ

Runway ML:クリエイターのための機械学習ツール

コメント