TensorSpace.js:ニューラルネットワークの構造を可視化するフレームワーク

Twitterで知ったブラウザ上でインタラクティブにCNN(Convolutional Neural Network)のネットワーク構造を3Dで可視化できるオープンソースのフレームワークTensorSpace.js。ネットワーク構造だけでなく、特徴マップも可視化できる。
Apache License 2.0だそうです。

TensorSpace.js

TensorSpace.js

TensorSpaceは、TensorFlow.js, Three.js, Tween.jsで構築されたニューラルネットワークの3D視覚化フレームワークです。TensorSpaceは、ディープラーニングのレイヤー構築、訓練済みモデルの読み込み、ブラウザ上での3D可視化できるKerasライクなAPIを提供します。
TensorSpaceなら、モデルの構造とは何なのか、モデルはどのように訓練されているのか、モデルが中間情報に基づいてどのように結果を予測しているのかを直感的に学ぶことができます。
TensorSpaceでは、モデルの前処理を行うことでTensorFlow, Keras, TensorFlow.jsで事前に訓練したモデルの可視化をサポートしています。



例のごとく、ソースコードはGitHubにある↓
https://github.com/tensorspace-team/tensorspace

ドキュメントはこちら↓
https://tensorspace.org/html/docs/startIntro.html
Documentation

ただ、自分で動作環境を構築しなくてもデモページで有名なニューラルネットワーク(LeNet, AlexNet, VGG-16, ResNet-50, MobileNetv1, YOLOv2-tiny, ACGAN)の可視化を試すことができる↓
https://tensorspace.org/html/playground/index.html

LeNet

LeNet

AlexNet

AlexNet

YOLOv2-tiny

YOLOv2-tiny

ResNet-50

ResNet-50

ACGAN

ACGAN

オイラは仕組み・プロセスの可視化が大好物なので、こういう可視化ツールすごく好きです。


畳み込みニューラルネットワーク (CNN: Convolutional Neural Network)
例の書籍「ゼロから作るDeep Learning ―Pythonで学ぶディープラーニングの理論と実装」を一通り読み終わりました。「あえてPythonを使わずにUnity C#で実装しながら勉強する」とか言っておきながら、結局途中でコーディン...


高橋 啓治郎さんのGANのUnity移植もそうだったけど、この可視化実装の敷居が下がっているのはTensorFlow.jsの存在がかなり効いているんだろうか。
https://qiita.com/keijiro/items/8874c5730feaf80b7943

関連記事

PyMC:Pythonのベイズ統計ライブラリ

Mean Stack開発の最初の一歩

Physics Forests:機械学習で流体シミュレーションを近似する

オープンソースの取引プラットフォーム

3D復元技術の情報リンク集

顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト

OpenMesh:オープンソースの3Dメッシュデータライブラリ

OpenCVでPhotoshopのプラグイン開発

書籍『イラストで学ぶ ディープラーニング』

iOSデバイスのためのフィジカル・コンピューティングツールキット『konashi(こなし)』

Human Generator:Blender向け人体生成アドオン

Webスクレイピングの勉強会に行ってきた

Point Cloud Consortiumのセミナー「3D点群の未来」に行ってきたよ

PCA (主成分分析)

CycleGAN:ドメイン関係を学習した画像変換

iPhoneで3D写真が撮れるアプリ『seene』

全脳アーキテクチャ勉強会

OpenCV 3.1のsfmモジュールを試す

Facebookの顔認証技術『DeepFace』

C++始めようと思うんだ

機械学習手法『Random Forest』

Pylearn2:ディープラーニングに対応したPythonの機械学習ライブラリ

OpenCVで平均顔を作るチュートリアル

WebGL開発に関する情報が充実してきている

Kinect for Windows v2の日本価格決定

Paul Debevec

ArUco:OpenCVベースのコンパクトなARライブラリ

まだ続くブログの不調

cvui:OpenCVのための軽量GUIライブラリ

FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ

MLDemos:機械学習について理解するための可視化ツール

Googleが画像解析旅行ガイドアプリのJetpac社を買収

RefineNet (Multi-Path Refinement Network):ディープラーニン...

OpenMVS:Multi-View Stereoによる3次元復元ライブラリ

JavaScriptとかWebGLとかCanvasとか

uvでWindows11のPython環境を管理する

Unity Scriptコーディング→Unreal Engine Scriptコーディング

Mechanizeで要認証Webサイトをスクレイピング

hloc:SuperGlueで精度を向上させたSfM実装

機械学習での「回帰」とは?

Two Minute Papers:先端研究を短時間で紹介するYouTubeチャンネル

openMVGをWindows10 Visual Studio 2015環境でビルドする

コメント