Deep Fluids:流体シミュレーションをディープラーニングで近似する

チューリッヒ工科大学(ETH Zurich)、ミュンヘン工科大学、Pixarによるディープラーニングで流体シミュレーションを近似する研究 Deep Fluids: A Generative Network for Parameterized Fluid Simulationsプロジェクトページソースコードが公開されている。

Deep Fluids

本研究では、削減済みのパラメータセットから流体シミュレーションを合成する新しい生成モデルを提案します。畳み込みニューラルネットワークを離散パラメータ化した流体シミュレーションの速度場(velocity fields)で訓練しました。

訓練データの代表的な特徴を学習するディープラーニングアーキテクチャの特性により、本研究の生成モデルは訓練データセットを正確に近似しつつ、中間値をもっともらしく補間することができます。この生成モデルは、全ての時刻で速度場(velocity fields)の無発散(divergence-free)を保証する新しい損失関数を導入することで流体に最適化されています。

本研究ではさらに、複雑なパラメータを削減した空間で扱えること、潜在空間(latent space)で第2のネットワークと統合することでシミュレーションをリアルタイムに実現できることを示します。
本手法では流体の多種多様な挙動をモデル化しているため、高速なシミュレーション構築、異なるパラメータを持つ流体の補間、タイムリサンプリング、潜在空間(latent space)シミュレーション、シミュレーションデータの圧縮などに応用できます。

本手法による速度場の再構築は、同データをCPUで再シミュレーションするよりも最大で700倍高速に生成でき、圧縮率は最大1300倍となります。

5月に開催されるEurographics 2019で発表されるそうです。



ETH Zurichといえば、数年前にRegression Forestベースの流体シミュレーション近似手法Pysics Forestsを発表していましたね↓



機械学習による流体シミュレーション近似を突き詰めていくと、やっぱりニューラルネットワークに行き着くということなのだろうか。

GitHubで公開されているDeep Fluidsのソースコードを見ると、TensorFlowベースで実装されているようだ↓
https://github.com/byungsook/deep-fluids

mantaflowという流体シミュレーションのフレームワークを使って訓練用のデータセットを用意するんですね↓

mantaflow

mantaflowは、コンピューターグラフィックスでの流体シミュレーションの研究を対象としたオープンソースのフレームワークです。
並列化されたC++のsolverコア、pythonシーン定義のインターフェイス、プラグインシステムにより、新しいアルゴリズムの迅速なプロトタイピング・テストが可能です。mantaflowには広範囲のNavier-Storkes solverの変種が含まれています。
mantaflowはとても用途が広く、ディープラーニングのフレームワーク(例:numpyを介してTensorFlow)と連携してインポート/エクスポートを可能な他、matlabのプラグインとしてスタンドアローンにコンパイルすることもできます。
最新版のダウンロードはこちら

Physics Forestsで著者の1人にDisney Research所属の人がいたように、Deep Fluidsの著者の中にはPixar所属の人がいますね。

CGで一昔前は物理ベースと言われていたジャンルが、演算コストが頭打ちになってだんだんナレッジ(知識)ベースへと移ってきているということだろうか。
大きな目で見ると、現象をデフォルメして軽い処理で近似していた時代に戻っているような気もする。

多次元パラメータを扱う関数の多いCG分野はディープラーニング(というかニューラルネットワーク)に向いてるのかもな。
畳み込みって、テクスチャマッピングやShading処理そのものだし、GPUとの相性も良い。
https://shiropen.com/seamless/deep-fluids

NVIDIAがGPGPUと言い始めたころ、その使用例は流体計算が多かった気がするけど、時代を経て手を変え品を変え、結局GPUで流体計算しているのも何だか不思議。

関連記事

ブログの復旧が難航してた話

中学3年生が制作した短編映像作品『2045』

GoB:ZBrushとBlenderを連携させるアドオン

ヒーローに変身なりきりアーケードゲーム『ナレルンダー』

ZBrushでアヴァン・ガメラを作ってみる

Adobe Photoshop CS4 Extendedの3Dモデル編集機能

OpenMVSのサンプルを動かしてみる

ディープラーニング

CGALDotNet:計算幾何学ライブラリ CGALのC#ラッパー

Blender 2.81でIntel Open Image Denoiseを使う

OpenGVの用語

ファンの力

BlenderのPython環境にPyTorchをインストールする

BlenderProc:Blenderで機械学習用の画像データを生成するPythonツール

サンプルコードにも間違いはある?

NeRF (Neural Radiance Fields):深層学習による新規視点合成

U-Net:ディープラーニングによるSemantic Segmentation手法

Unityからkonashiをコントロールする

viser:Pythonで使える3D可視化ライブラリ

Stanford Bunny

ZBrushでアヴァン・ガメラを作ってみる 甲羅のバランス調整

ZBrushトレーニング

無料で使える人体3DCG作成ツール

株式会社ヘキサドライブの研究室ページ

『ハン・ソロ/スター・ウォーズ・ストーリー』のVFXブレイクダウン まとめ

Pythonの自然言語処理ライブラリ『NLTK(Natural Language Toolkit)』

スターウォーズ エピソードVIIの予告編

Python拡張モジュールのWindows用インストーラー配布サイト

OpenMVS:Multi-View Stereoによる3次元復元ライブラリ

続・ディープラーニングの資料

タダでRenderManを体験する方法

Javaで作られたオープンソースの3DCGレンダラ『Sunflow』

OpenCV 3.1から追加されたSfMモジュール

この連休でZBrushの スキルアップを…

MFnDataとMFnAttribute

オープンソースのプリント基板設計ツール『KiCad』

トランスフォーマー :リベンジのメイキング (デジタルドメイン)

Point Cloud Utils:Pythonで3D点群・Meshを扱うライブラリ

Regard3D:オープンソースのStructure from Motionツール

Unity Scriptコーディング→Unreal Engine Scriptコーディング

Physics Forests:機械学習で流体シミュレーションを近似する

ZBrushの練習 手のモデリング

コメント