写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

書籍『イラストで学ぶ ディープラーニング』

Unity ARKitプラグインサンプルのドキュメントを読む

顔画像処理技術の過去の研究

トランスフォーマーの変形パターンを覚えるのは楽しいと思うんだ

Vancouver Film Schoolのデモリール

天体写真の3D動画

テスト

trimesh：PythonでポリゴンMeshを扱うライブラ...

SegNet：ディープラーニングによるSemantic Se...

映画『ジュラシック・ワールド』のVFXメイキング

池袋パルコで3Dのバーチャルフィッティング『ウェアラブル ク...

ZBrushでアヴァン・ガメラを作ってみる パーツ分割

Facebookの顔認証技術『DeepFace』

映画『シン・仮面ライダー』 メイキング情報まとめ

顔モデリングのチュートリアル

Faster R-CNN：ディープラーニングによる一般物体検...

布のモデリング

プロシージャル手法に特化した本が出てるみたい(まだ買わないけ...

UnityのAR FoundationでARKit 3

ラクガキの立体化 反省

世界一下品なクマと世界一紳士なクマ

ZBrushで仮面ライダー3号を造る 仮面編 失敗のリカバー

ZBrushの練習 手のモデリング

ZBrushでゴジラ2001を作ってみる 身体のバランスを探...

Unreal Engine Tokyo MeetUp!へ行っ...

Photo Bash：複数の写真を組み合わせて1枚のイラスト...

ラクガキの立体化 3Dプリント注文

コンピュータビジョンの技術マップ

映画『ゴジラ-1.0』 メイキング情報まとめ

PGGAN：段階的に解像度を上げて学習を進めるGAN

Rerun：マルチモーダルデータの可視化アプリとSDK

Human Generator：Blenderの人体生成アド...

GoogleのDeep Learning論文

iPadをハンディ3Dスキャナにするガジェット『iSense...

Mitsuba 2：オープンソースの物理ベースレンダラ

Active Appearance Models（AAM）

ZBrushでアヴァン・ガメラを作ってみる 頭頂部と首周りを...

『ローグ・ワン/スター・ウォーズ・ストーリー』"あのキャラク...

ZBrush 4R7

『ピクサー展』へ行ってきた

Adobe MAX 2015

UnityでTweenアニメーションを実装できる3種類の無料...

コメント