3Dスキャンしたテクスチャから照明を除去するUnityツール『De Lighting tool』

2017.07.13

Unity Technologiesが、3Dスキャンで取得したテクスチャから照明成分を除去してAlbedo Mapを作成するツールをGitHubで公開した。
https://labs.unity.com/article/experimental-feature-de-lighting-tool

こういうツールがVFX関係の会社じゃなくて、ゲームエンジンの会社から提供されるってのが面白い時代。

De Lighting tool

De-Lighting Toolは、Photogrammetry(写真測量)アセットパイプラインで取得したテクスチャから照明の影響を除去するツールです。
CG業界では、Photogrammetryがますます普及しています。普通のカメラを高性能な3Dスキャナとして利用できるこの手法は、リアルな3Dアセットを作成する画期的な術を開拓しました。
しかし、この技術で生成された生のテクスチャには、除去すべき多くの照明の情報が含まれています。Unity De-Lighting Toolは、この複雑な問題を解決するために開発されました。

考え方としては、3Dスキャンしたオブジェクトなら3D形状が分かっているから、そこから逆算しておおよその照明の影響を取り除けるわけですね。
(厳密に言うと、このツールは3D形状から算出したAmbient Occlusion Map, Normal Map, Bent Normal Mapを手掛かりに処理を行う)



ドキュメントはこちらからも↓
https://github.com/Unity-Technologies/DeLightingTool/blob/master/Documentation/De-LightingTool.pdf

すぐに試せるサンプルデータも一緒に配布されている。
https://github.com/Unity-Technologies/DeLightingTool/blob/master/Documentation/DeLighting-Tool-Data-Rock01.zip

追記：正式にAsset Storeで公開され、チュートリアル動画も公開された↓
https://www.assetstore.unity3d.com/jp/#!/content/99583



3D形状ありきじゃなくて、1枚の画像から反射成分を分離する処理をガチでやるとしたら、Intrinsic Imageという研究分野になるかな？

UniteとかCEDECを見ていて思うのは、産業の技術発展って人材の集まり方に左右されるんだろうなぁ、と。もともとデベロッパーが多く集まるゲーム産業だからこそツールという形で技術・ノウハウを産業全体へ広めることができているだ気がする。
デベロッパーが集まりにくい産業ではなかなかこういうことが起こらなそうだ。少なくとも日本の映像業でキャリアのスタートがデベロッパーの人っていなさそう。なんというか、日本は職人というか、属人が産業の大部分を占めてるのかも。プラットフォームとなるDCCツールやゲームエンジンは海外のものばかりだし。

最近カラー、ドワンゴ、麻生塾が共同設立したアニメ・CG制作会社「プロジェクトスタジオQ」の設立発表会見で少しUnityに言及していたらしい。
http://nlab.itmedia.co.jp/nl/articles/1707/12/news104.html
http://www.itmedia.co.jp/news/articles/1707/13/news120.html



http://cgtracking.net/archives/41379

関連記事

Mayaのシェーディングノードの区分

映画『シン・仮面ライダー』 メイキング情報まとめ

3DCGのモデルを立体化するサービス

ヒーローに変身なりきりアーケードゲーム『ナレルンダー』

SculptrisとBlenderで作ったGodzilla ...

Maya LTでFBIK(Full Body IK)

ラクガキの立体化 目標設定

PythonでMayaのShapeノードプラグインを作る

TorchStudio：PyTorchのための統合開発環境と...

ZBrush用トポロジー転送プラグイン『ZWrap Plug...

ZBrushでアヴァン・ガメラを作ってみる 下アゴの付け根を...

ZBrushで作った3Dモデルを立体視で確認できるVRアプリ...

ZBrushCoreのTransposeとGizmo 3D

Regard3D：オープンソースのStructure fro...

uGUI：Unityの新しいGUI作成システム

BlenderProc：Blenderで機械学習用の画像デー...

UnityでARKit2.0

実写と実写の合成時の色の馴染ませテクニック

UnityでShaderの入力パラメータとして行列を渡す

Accord.NET Framework：C#で使える機械学...

CGレンダラ研究開発のためのフレームワーク『Lightmet...

mentalrayのSubsurface Scatterin...

ZBrushでアヴァン・ガメラを作ってみる 脚のポーズ調整

trimesh：PythonでポリゴンMeshを扱うライブラ...

3D復元技術の情報リンク集

ZBrushのZmodelerとDynamic Subdiv...

Unityをレンダラとして活用する

DensePose：画像中の人物表面のUV座標を推定する

ZBrushでアヴァン・ガメラを作ってみる 壊れたデータの救...

書籍『メイキング・オブ・ピクサー 創造力をつくった人々』を読...

テスト

Unityで画面タッチ・ジェスチャ入力を扱う無料Asset『...

プラカラーストック：模型塗料を管理できるスマホアプリ

画像生成AI Stable Diffusionで遊ぶ

Deep Fluids：流体シミュレーションをディープラーニ...

ZBrushで手首のモデリングをリファイン

Pix2Pix：CGANによる画像変換

Iridescence：プロトタイピング向け軽量3D可視化ラ...

UnrealCV：コンピュータビジョン研究のためのUnrea...

PythonでBlenderのAdd-on開発

HD画質の無駄遣い

マイケル・ベイの動画の感覚

コメント