写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

Caffe：読みやすくて高速なディープラーニングのフレームワ...

機械学習手法『Random Forest』

NeRF (Neural Radiance Fields)：...

ZBrushでゴジラ2001を作ってみる 目元だけ作り込んで...

ZBrushでアヴァン・ガメラを作ってみる 壊れたデータの救...

OpenCV 3.1のsfmモジュールを試す

VGGT：マルチビュー・フィードフォワード型3Dビジョン基盤...

libigl：軽量なジオメトリ処理ライブラリ

Polyscope：3Dデータ操作用GUIライブラリ

OpenCVで平均顔を作るチュートリアル

池袋パルコで3Dのバーチャルフィッティング『ウェアラブル ク...

clearcoat Shader

ラクガキの立体化 目標設定

CreativeCOW.net

ZBrushで仮面ライダー3号を造る 仮面編 失敗のリカバー

オープンソースの顔認識フレームワーク『OpenBR』

ManuelBastioniLAB：人体モデリングできるBl...

OpenMVS：Multi-View Stereoによる3次...

Geogram：C++の3D幾何アルゴリズムライブラリ

Mask R-CNN：ディープラーニングによる一般物体検出・...

3D復元技術の情報リンク集

Maya LTのQuick Rigを試す

トランスフォーマーロストエイジのメイキング

Faceshiftで表情をキャプチャしてBlender上でM...

Oculus Goを購入！

PythonでMayaのShapeノードプラグインを作る

MeshroomでPhotogrammetry

OpenCV バージョン4がリリースされた！

RefineNet (Multi-Path Refineme...

ZBrushでリメッシュとディティールの転送

FreeMoCap Project：オープンソースのマーカー...

Live CV：インタラクティブにComputer Visi...

ZBrushでアヴァン・ガメラを作ってみる 腕の作り込み

昔Mayaでモデリングしたモデルをリファインしてみようか

顔画像処理技術の過去の研究

書籍『メイキング・オブ・ピクサー 創造力をつくった人々』を読...

中学3年生が制作した短編映像作品『2045』

Windows Server 2008にAutodesk M...

OpenVDB：3Dボリュームデータ処理ライブラリ

無料で使える人体3DCG作成ツール

OpenCV 3.1とopencv_contribモジュール...

UnityのGameObjectの向きをScriptで制御す...

コメント