写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

3D復元技術の情報リンク集

UnityのTransformクラスについて調べてみた

ZBrushでアヴァン・ガメラを作ってみる 首回りの修正・脚...

単純に遊びに行くのはだめなのか？

Ambient Occlusionを解析的に求める

CreativeCOW.net

実写と実写の合成時の色の馴染ませテクニック

グローバルイルミネーションに手を出す前に、やり残したことがあ...

ZBrushと液晶ペンタブレットでドラゴンをモデリングするチ...

ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調...

BlenderのPython環境にPyTorchをインストー...

BlenderProc：Blenderで機械学習用の画像デー...

Point Cloud Consortiumのセミナー「3D...

ZBrushの作業環境を見直す

株式会社ヘキサドライブの研究室ページ

ZBrushでアヴァン・ガメラを作ってみる 下アゴと頭部を作...

CGのためのディープラーニング

3Dスキャンに基づくプロシージャルフェイシャルアニメーション

ジュラシック・パークの続編『ジュラシック・ワールド』

OpenCVの顔検出過程を可視化した動画

OpenGVの用語

3DCGのモデルを立体化するサービス

Active Appearance Models（AAM）

『スター・ウォーズ 最後のジェダイ』のVFXブレイクダウン ...

Regard3D：オープンソースのStructure fro...

画像認識による位置情報取得 - Semi-Direct Mo...

オープンソースの顔の動作解析ツールキット『OpenFace』

書籍『開田裕治 怪獣イラストテクニック』

布のモデリング

UnityのGlobal Illumination

オープンソースの顔認識フレームワーク『OpenBR』

第1回 3D勉強会＠関東『SLAMチュートリアル大会』

ZBrushで仮面ライダー3号を造る 仮面編 横顔のシルエッ...

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

「ベンジャミン·バトン数奇な人生」でどうやってCGの顔を作っ...

FCN (Fully Convolutional Netwo...

DUSt3R：3Dコンピュータービジョンの基盤モデル

物理ベースレンダリングのためのマテリアル設定チートシート

ポイントクラウドコンソーシアム

ZBrushでリメッシュとディティールの転送

iPhone欲しいなぁ

NVIDIA Quadro OpenGL DriverのDe...

コメント