3Dスキャンしたテクスチャから照明を除去するUnityツール『De Lighting tool』

Unity Technologiesが、3Dスキャンで取得したテクスチャから照明成分を除去してAlbedo Mapを作成するツールをGitHubで公開した。
https://labs.unity.com/article/experimental-feature-de-lighting-tool

こういうツールがVFX関係の会社じゃなくて、ゲームエンジンの会社から提供されるってのが面白い時代。

De Lighting tool

De-Lighting Toolは、Photogrammetry(写真測量)アセットパイプラインで取得したテクスチャから照明の影響を除去するツールです。
CG業界では、Photogrammetryがますます普及しています。普通のカメラを高性能な3Dスキャナとして利用できるこの手法は、リアルな3Dアセットを作成する画期的な術を開拓しました。
しかし、この技術で生成された生のテクスチャには、除去すべき多くの照明の情報が含まれています。Unity De-Lighting Toolは、この複雑な問題を解決するために開発されました。

考え方としては、3Dスキャンしたオブジェクトなら3D形状が分かっているから、そこから逆算しておおよその照明の影響を取り除けるわけですね。
(厳密に言うと、このツールは3D形状から算出したAmbient Occlusion Map, Normal Map, Bent Normal Mapを手掛かりに処理を行う)



ドキュメントはこちらからも↓
https://github.com/Unity-Technologies/DeLightingTool/blob/master/Documentation/De-LightingTool.pdf

すぐに試せるサンプルデータも一緒に配布されている。
https://github.com/Unity-Technologies/DeLightingTool/blob/master/Documentation/DeLighting-Tool-Data-Rock01.zip

追記:正式にAsset Storeで公開され、チュートリアル動画も公開された↓
https://www.assetstore.unity3d.com/jp/#!/content/99583



3D形状ありきじゃなくて、1枚の画像から反射成分を分離する処理をガチでやるとしたら、Intrinsic Imageという研究分野になるかな?

UniteとかCEDECを見ていて思うのは、産業の技術発展って人材の集まり方に左右されるんだろうなぁ、と。もともとデベロッパーが多く集まるゲーム産業だからこそツールという形で技術・ノウハウを産業全体へ広めることができているだ気がする。
デベロッパーが集まりにくい産業ではなかなかこういうことが起こらなそうだ。少なくとも日本の映像業でキャリアのスタートがデベロッパーの人っていなさそう。なんというか、日本は職人というか、属人が産業の大部分を占めてるのかも。プラットフォームとなるDCCツールやゲームエンジンは海外のものばかりだし。

最近カラー、ドワンゴ、麻生塾が共同設立したアニメ・CG制作会社「プロジェクトスタジオQ」の設立発表会見で少しUnityに言及していたらしい。
http://nlab.itmedia.co.jp/nl/articles/1707/12/news104.html
http://www.itmedia.co.jp/news/articles/1707/13/news120.html



http://cgtracking.net/archives/41379

関連記事

JavaによるCGプログラミング入門サイト (日本語)

Adobe Photoshop CS4 Extendedの3Dモデル編集機能

『パシフィック・リム: アップライジング』のVFXブレイクダウン まとめ

ハリウッド版「GAIKING」パイロット映像

スターウォーズ エピソードVIIの予告編

ZBrushのお勉強

MB-Lab:Blenderの人体モデリングアドオン

ラクガキの立体化 進捗

Subsurface scatteringの動画

Windows Server 2008にAutodesk Maya 2009をインストール

プログラムによる景観の自動生成

3D Gaussian Splatting:リアルタイム描画できるRadiance Fields

ZBrushで仮面ライダー3号を造る 仮面編 PolyGroup作成に再挑戦

Python.NET:Pythonと.NETを連携させるパッケージ

ヒーローに変身なりきりアーケードゲーム『ナレルンダー』

中学3年生が制作した短編映像作品『2045』

SIGGRAPH ASIA 2009で学生ボランティア募集してるみたい

ZBrushのTranspose Masterでポーズを付ける

WebGL開発に関する情報が充実してきている

FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ

生物の骨格

Virtual Network Computing

MFnDataとMFnAttribute

映画『ミュータント・タートルズ』を観てきた

Raytracing Wiki

ZBrushでゴジラ2001を作ってみる 身体のアタリを作る

CNN Explainer:畳み込みニューラルネットワーク可視化ツール

ゴジラ(2014)のディティール制作の舞台裏

写真から3Dメッシュの生成・編集ができる無料ツール『Autodesk Memento』

Netron:機械学習モデルを可視化するツール

Faceshiftで表情をキャプチャしてBlender上でMakeHumanのメッシュを動かすデモ

ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調整

PythonでBlenderのAdd-on開発

Open3D:3Dデータ処理ライブラリ

Mayaのプラグイン開発

windowsのエクスプローラでRAW画像のサムネイルを表示するソフト『FastPictureVie...

ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始める

Math.NET Numerics:Unityで使える数値計算ライブラリ

書籍『ゼロから作るDeep Learning』で自分なりに学ぶ

注文してた本が届いた

ZBrushでゴジラ2001を作ってみる 目元だけ作り込んでバランスを見る

立体視を試してみた

コメント