TensorSpace.js:ニューラルネットワークの構造を可視化するフレームワーク

Twitterで知ったブラウザ上でインタラクティブにCNN(Convolutional Neural Network)のネットワーク構造を3Dで可視化できるオープンソースのフレームワークTensorSpace.js。ネットワーク構造だけでなく、特徴マップも可視化できる。
Apache License 2.0だそうです。

TensorSpace.js

TensorSpace.js

TensorSpaceは、TensorFlow.js, Three.js, Tween.jsで構築されたニューラルネットワークの3D視覚化フレームワークです。TensorSpaceは、ディープラーニングのレイヤー構築、訓練済みモデルの読み込み、ブラウザ上での3D可視化できるKerasライクなAPIを提供します。
TensorSpaceなら、モデルの構造とは何なのか、モデルはどのように訓練されているのか、モデルが中間情報に基づいてどのように結果を予測しているのかを直感的に学ぶことができます。
TensorSpaceでは、モデルの前処理を行うことでTensorFlow, Keras, TensorFlow.jsで事前に訓練したモデルの可視化をサポートしています。


スポンサーリンク


例のごとく、ソースコードはGitHubにある↓
https://github.com/tensorspace-team/tensorspace

ドキュメントはこちら↓
https://tensorspace.org/html/docs/startIntro.html
Documentation

ただ、自分で動作環境を構築しなくてもデモページで有名なニューラルネットワーク(LeNet, AlexNet, VGG-16, ResNet-50, MobileNetv1, YOLOv2-tiny, ACGAN)の可視化を試すことができる↓
https://tensorspace.org/html/playground/index.html


スポンサーリンク
LeNet

LeNet

AlexNet

AlexNet

YOLOv2-tiny

YOLOv2-tiny

ResNet-50

ResNet-50

ACGAN

ACGAN

オイラは仕組み・プロセスの可視化が大好物なので、こういう可視化ツールすごく好きです。


畳み込みニューラルネットワーク (CNN: Convolutional Neural Network)
例の書籍「ゼロから作るDeep Learning ―Pythonで学ぶディープラーニングの理論と実装」を一通り読み終わりました。 「あえてPythonを使わずにUnity C#で実装しながら勉強する」とか言っておきながら、結局途中でコーディ...


高橋 啓治郎さんのGANのUnity移植もそうだったけど、この可視化実装の敷居が下がっているのはTensorFlow.jsの存在がかなり効いているんだろうか。
https://qiita.com/keijiro/items/8874c5730feaf80b7943


スポンサーリンク

関連記事

geometry3Sharp:Unity C#で使えるポリゴン操作ライブラリ
RSSフィードを読込んで表示するWordpressプラグイン『RSSImport』
Boost オープンソースライブラリ
OANDAのfxTrade API
AfterEffectsプラグイン開発
UnityでPoint Cloudを表示する方法
HD画質の無駄遣い
AmazonEC2のインスタンスをt1.microからt2.microへ移行する
.NETで使えるTensorFlowライクなニューラルネットワークライブラリ『NeuralNetwo...
第1回 3D勉強会@関東『SLAMチュートリアル大会』
OpenCV 3.3.0-RCでsfmモジュールをビルド
iPhoneで3D写真が撮れるアプリ『seene』
フォトンの放射から格納までを可視化した動画
Blendify:コンピュータービジョン向けBlenderラッパー
SDカードサイズのコンピューター『Intel Edison』
オープンソースの物理ベースレンダラ『Mitsuba』をMayaで使う
NumSharp:C#で使えるNumPyライクな数値計算ライブラリ
動画で学ぶお絵かき講座『sensei』
Houdiniのライセンスの種類
KelpNet:C#で使える可読性重視のディープラーニングライブラリ
PyMC:Pythonのベイズ統計ライブラリ
MVStudio:オープンソースのPhotogrammetryツール
R-CNN (Regions with CNN features):ディープラーニングによる一般物体...
法線マップを用意してCanvas上でShadingするサンプル
ブログの復旧が難航してた話
UnityのTransformクラスについて調べてみた
Russian3DScannerのトポロジー転送ツール『WrapX』
WordPressの表示を高速化する
TorchStudio:PyTorchのための統合開発環境とエコシステム
Dlib:C++の機械学習ライブラリ
Autodesk Mementoでゴジラを3次元復元する
顔追跡による擬似3D表示『Dynamic Perspective』
MeshroomでPhotogrammetry
仮想関数
Runway ML:クリエイターのための機械学習ツール
OpenCV3.3.0でsfmモジュールのビルドに成功!
ZBrushで作った3Dモデルを立体視で確認できるVRアプリを作る
hloc:SuperGlueで精度を向上させたSfM実装
3Dグラフィックスの入門書
写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』
SSII 2014 デモンストレーションセッションのダイジェスト動画
Twitter APIのPythonラッパー『python-twitter』

コメント