写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

2014.10.11

Twitterで知ったんだけど、10月6日～8日にロサンゼルスで開催されたAdobe MAX 2014というカンファレンスの、将来搭載されるかもしれない新技術をプレゼンテーションする「Sneak Peeks」というセッションの内容がすごい。全部で13のプロジェクトが紹介されたらしいんだけど、中でも3DPhotoMagicというのが個人的にツボ。
これは写真に3Dオブジェクトを違和感無く合成するための技術。実写と3DCGを合成する話は結構昔からあるんだけど、違和感無く合成するためには写真の撮影環境の情報を別途計測して利用する方法が主流だった。このプロジェクトは撮影環境の情報を写真1枚から推定してしまう技術なわけです。



3Dオブジェクトを合成する上で必要となる情報は、カメラのレンズの情報(歪みやパースなど)や、写真内に写っている物の位置関係、そして照明環境。ハリウッドの大作映画だと、これらの情報を撮影時に記録したり、撮影後の画から人海戦術で入力したりしてましたね。今まで人的な作業が非常に多いジャンルだったけど、これらが1枚の画像からサクッとできちゃう技術だそうです。
 


 
この「Sneak Peeks」で発表される技術は、Adobe製品への搭載を確約するものではなく、あくまで可能性のプレゼンテーションだけど、やっぱり期待してしまう。
その他に発表されたプロジェクトについてはこちらの記事が詳しい↓
「この昼の写真、夜にしてよ」→ できるんです！　Adobeの新技術発表会「Sneak Peeks」で発表された技術群がすごい
 

関連記事

Super Resolution：OpenCVの超解像処理モ...

PeopleSansPeople：機械学習用の人物データをU...

ラクガキの立体化 背中の作り込み・手首の移植

オープンソースの顔認識フレームワーク『OpenBR』

OpenCVで顔のモーフィングを実装する

Blender 2.81でIntel Open Image ...

SSD (Single Shot Multibox Dete...

AR (Augmented Reality)とDR (Dim...

ZBrushで仮面ライダー3号を造る 仮面編 PolyGro...

Mixamo：人型3Dキャラクターアニメーション制作サービス

ラクガキの立体化 進捗

trimesh：PythonでポリゴンMeshを扱うライブラ...

ジュラシック・パークのメイキング

UnityでARKit2.0

フィーリングに基づくタマムシの質感表現

『ハン・ソロ/スター・ウォーズ・ストーリー』のVFXブレイク...

ポリ男からMetaHumanを作る

PolyPaint

DUSt3R：3Dコンピュータービジョンの基盤モデル

ポリゴン用各種イテレータと関数セット

ZBrushCore

UnityでPoint Cloudを表示する方法

Siggraph Asia 2009 カンファレンスの詳細

Mayaのポリゴン分割ツールの進化

ZBrushでアヴァン・ガメラを作ってみる 脚のポーズ調整

uGUI：Unityの新しいGUI作成システム

OpenMayaRender

ZBrushで仮面ライダー3号を造る 仮面編 Dam Sta...

Unreal Engine 5の情報が公開された！

3D Gaussian Splatting：リアルタイム描画...

ラクガキの立体化 3Dプリント注文

映画『シン・仮面ライダー』 メイキング情報まとめ

ZBrushでアヴァン・ガメラを作ってみる 下アゴと頭部を作...

布地のシワの法則性

ZBrush用トポロジー転送プラグイン『ZWrap Plug...

Pix2Pix：CGANによる画像変換

CEDEC 3日目

Adobe MAX 2015

Mitsuba 2：オープンソースの物理ベースレンダラ

頭蓋骨からの顔復元と進化過程の可視化

Multi-View Environment：複数画像から3...

BlenderのPython環境にPyTorchをインストー...

コメント