Deep Fluids:流体シミュレーションをディープラーニングで近似する

チューリッヒ工科大学(ETH Zurich)、ミュンヘン工科大学、Pixarによるディープラーニングで流体シミュレーションを近似する研究 Deep Fluids: A Generative Network for Parameterized Fluid Simulationsプロジェクトページソースコードが公開されている。

Deep Fluids

本研究では、削減済みのパラメータセットから流体シミュレーションを合成する新しい生成モデルを提案します。畳み込みニューラルネットワークを離散パラメータ化した流体シミュレーションの速度場(velocity fields)で訓練しました。

訓練データの代表的な特徴を学習するディープラーニングアーキテクチャの特性により、本研究の生成モデルは訓練データセットを正確に近似しつつ、中間値をもっともらしく補間することができます。この生成モデルは、全ての時刻で速度場(velocity fields)の無発散(divergence-free)を保証する新しい損失関数を導入することで流体に最適化されています。

本研究ではさらに、複雑なパラメータを削減した空間で扱えること、潜在空間(latent space)で第2のネットワークと統合することでシミュレーションをリアルタイムに実現できることを示します。
本手法では流体の多種多様な挙動をモデル化しているため、高速なシミュレーション構築、異なるパラメータを持つ流体の補間、タイムリサンプリング、潜在空間(latent space)シミュレーション、シミュレーションデータの圧縮などに応用できます。

本手法による速度場の再構築は、同データをCPUで再シミュレーションするよりも最大で700倍高速に生成でき、圧縮率は最大1300倍となります。

5月に開催されるEurographics 2019で発表されるそうです。



ETH Zurichといえば、数年前にRegression Forestベースの流体シミュレーション近似手法Pysics Forestsを発表していましたね↓



機械学習による流体シミュレーション近似を突き詰めていくと、やっぱりニューラルネットワークに行き着くということなのだろうか。

GitHubで公開されているDeep Fluidsのソースコードを見ると、TensorFlowベースで実装されているようだ↓
https://github.com/byungsook/deep-fluids

mantaflowという流体シミュレーションのフレームワークを使って訓練用のデータセットを用意するんですね↓

mantaflow

mantaflowは、コンピューターグラフィックスでの流体シミュレーションの研究を対象としたオープンソースのフレームワークです。
並列化されたC++のsolverコア、pythonシーン定義のインターフェイス、プラグインシステムにより、新しいアルゴリズムの迅速なプロトタイピング・テストが可能です。mantaflowには広範囲のNavier-Storkes solverの変種が含まれています。
mantaflowはとても用途が広く、ディープラーニングのフレームワーク(例:numpyを介してTensorFlow)と連携してインポート/エクスポートを可能な他、matlabのプラグインとしてスタンドアローンにコンパイルすることもできます。
最新版のダウンロードはこちら

Physics Forestsで著者の1人にDisney Research所属の人がいたように、Deep Fluidsの著者の中にはPixar所属の人がいますね。

CGで一昔前は物理ベースと言われていたジャンルが、演算コストが頭打ちになってだんだんナレッジ(知識)ベースへと移ってきているということだろうか。
大きな目で見ると、現象をデフォルメして軽い処理で近似していた時代に戻っているような気もする。

多次元パラメータを扱う関数の多いCG分野はディープラーニング(というかニューラルネットワーク)に向いてるのかもな。
畳み込みって、テクスチャマッピングやShading処理そのものだし、GPUとの相性も良い。
https://shiropen.com/seamless/deep-fluids

NVIDIAがGPGPUと言い始めたころ、その使用例は流体計算が多かった気がするけど、時代を経て手を変え品を変え、結局GPUで流体計算しているのも何だか不思議。

関連記事

OpenMayaRender

ラクガキの立体化 胴体の追加

ラクガキの立体化

OpenCV

U-Net:ディープラーニングによるSemantic Segmentation手法

PSPNet (Pyramid Scene Parsing Network):ディープラーニングによ...

HD画質の無駄遣い その2

『スター・ウォーズ フォースの覚醒』のVFXブレイクダウン まとめ

TorchStudio:PyTorchのための統合開発環境とエコシステム

BlenderのGeometry Nodeで遊ぶ

After Effects全エフェクトの解説(6.5)

スクラッチで既存のキャラクターを立体化したい

リアルタイム レイトレーシングAPI『DirectX Raytracing (DXR)』

iOSデバイスと接続して連携するガジェットの開発方法

PeopleSansPeople:機械学習用の人物データをUnityで生成する

ZBrushのキャンバスにリファレンス画像を配置する

組み込み向けのWindows OS 『Windows Embedded』

機械学習のオープンソースソフトウェアフォーラム『mloss(machine learning ope...

Alice Vision:オープンソースのPhotogrammetryフレームワーク

ZBrushのZmodelerとDynamic Subdivisionを学ぶ

VCG Library:C++のポリゴン操作ライブラリ

続・ディープラーニングの資料

MLDemos:機械学習について理解するための可視化ツール

OpenCVで顔のランドマークを検出する『Facemark API』

Mitsuba 2:オープンソースの物理ベースレンダラ

UnrealCLR:Unreal Engineで.NET Coreを利用できるプラグイン

TensorFlowでCGを微分できる『TensorFlow Graphics』

OpenCVの三角測量関数『cv::triangulatepoints』

Phongの表現力パネェ 材質別のPhong Shader用パラメータ一覧

白組による『シン・ゴジラ』CGメイキング映像が公開された!

為替レートの読み方 2WAYプライス表示

単純に遊びに行くのはだめなのか?

WordPressプラグインの作り方

トランスフォーマー/ロストエイジのメイキング

機械学習について最近知った情報

UnrealCV:コンピュータビジョン研究のためのUnreal Engineプラグイン

openMVG:複数視点画像から3次元形状を復元するライブラリ

1枚の画像からマテリアルを作成できる無料ツール『Materialize』

OpenCVでカメラ画像から自己位置認識 (Visual Odometry)

Math.NET Numerics:Unityで使える数値計算ライブラリ

Unity Scriptコーディング→Unreal Engine Scriptコーディング

OpenCVのfindEssentialMat関数を使ったサンプルを読んでみる

コメント