写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

Twitterで知ったんだけど、10月6日~8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。


スポンサーリンク


3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 

 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです! Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 


スポンサーリンク


スポンサーリンク

関連記事

続・ディープラーニングの資料

Paul Debevec

ヘッドマウントディスプレイとビジュアリゼーションの未来

MPFB2:Blenderの人体モデリングアドオン

世界一下品なクマと世界一紳士なクマ

フルCGのウルトラマン!?

疑似3D写真が撮れるiPhoneアプリ『Seene』がアップデートでついにフル3Dモデルが撮影できる...

OpenCVの超解像(SuperResolution)モジュールを試す

OpenCVのバージョン3が正式リリースされたぞ

Kornia:微分可能なコンピュータービジョンライブラリ

ZBrushで仮面ライダー3号を造る ベース編

Pix2Pix:CGANによる画像変換

MB-Lab:Blenderの人体モデリングアドオン

Python for Unity:UnityEditorでPythonを使えるパッケージ

YOLO (You Only Look Once):ディープラーニングによる一般物体検出手法

布地のシワの法則性

libigl:軽量なジオメトリ処理ライブラリ

ZBrushで基本となるブラシ

ZBrush用トポロジー転送プラグイン『ZWrap Plugin for ZBrush』

SSII 2014 デモンストレーションセッションのダイジェスト動画

Mayaのポリゴン分割ツールの進化

ZBrushでゴジラ2001を作ってみる 姿勢の変更

Texturing & Modeling A Procedural ApproachをGoo...

Google製オープンソース機械学習ライブラリ『TensorFlow』のWindows版が公開された

NeRF (Neural Radiance Fields):深層学習による新規視点合成

プログラムによる景観の自動生成

Accord.NET Framework:C#で使える機械学習ライブラリ

CGALDotNet:計算幾何学ライブラリ CGALのC#ラッパー

1枚の画像からマテリアルを作成できる無料ツール『Materialize』

PyTorch3D:3Dコンピュータービジョンライブラリ

Zibra Liquids:Unity向け流体シミュレーションプラグイン

hloc:SuperGlueで精度を向上させたSfM実装

オープンソースの物理ベースレンダラ『Mitsuba』をMayaで使う

立体視を試してみた

OpenCV 3.3.0 contribのsfmモジュールのサンプルを動かしてみる

第25回コンピュータビジョン勉強会@関東に行って来た

PGGAN:段階的に解像度を上げて学習を進めるGAN

OpenMesh:オープンソースの3Dメッシュデータライブラリ

ちょっと凝り過ぎなWebキャンペーン:全日本バーベイタム選手権 (MITSUBISHI KAGAKU...

2012 昨日のクローズアップ現代を見た

ラクガキの立体化 3Dプリント注文

OpenCVの三角測量関数『cv::triangulatepoints』

コメント