TensorSpace.js:ニューラルネットワークの構造を可視化するフレームワーク

Twitterで知ったブラウザ上でインタラクティブにCNN(Convolutional Neural Network)のネットワーク構造を3Dで可視化できるオープンソースのフレームワークTensorSpace.js。ネットワーク構造だけでなく、特徴マップも可視化できる。
Apache License 2.0だそうです。

TensorSpace.js

TensorSpace.js

TensorSpaceは、TensorFlow.js, Three.js, Tween.jsで構築されたニューラルネットワークの3D視覚化フレームワークです。TensorSpaceは、ディープラーニングのレイヤー構築、訓練済みモデルの読み込み、ブラウザ上での3D可視化できるKerasライクなAPIを提供します。
TensorSpaceなら、モデルの構造とは何なのか、モデルはどのように訓練されているのか、モデルが中間情報に基づいてどのように結果を予測しているのかを直感的に学ぶことができます。
TensorSpaceでは、モデルの前処理を行うことでTensorFlow, Keras, TensorFlow.jsで事前に訓練したモデルの可視化をサポートしています。



例のごとく、ソースコードはGitHubにある↓
https://github.com/tensorspace-team/tensorspace

ドキュメントはこちら↓
https://tensorspace.org/html/docs/startIntro.html
Documentation

ただ、自分で動作環境を構築しなくてもデモページで有名なニューラルネットワーク(LeNet, AlexNet, VGG-16, ResNet-50, MobileNetv1, YOLOv2-tiny, ACGAN)の可視化を試すことができる↓
https://tensorspace.org/html/playground/index.html

LeNet

LeNet

AlexNet

AlexNet

YOLOv2-tiny

YOLOv2-tiny

ResNet-50

ResNet-50

ACGAN

ACGAN

オイラは仕組み・プロセスの可視化が大好物なので、こういう可視化ツールすごく好きです。


畳み込みニューラルネットワーク (CNN: Convolutional Neural Network)
例の書籍「ゼロから作るDeep Learning ―Pythonで学ぶディープラーニングの理論と実装」を一通り読み終わりました。「あえてPythonを使わずにUnity C#で実装しながら勉強する」とか言っておきながら、結局途中でコーディン...


高橋 啓治郎さんのGANのUnity移植もそうだったけど、この可視化実装の敷居が下がっているのはTensorFlow.jsの存在がかなり効いているんだろうか。
https://qiita.com/keijiro/items/8874c5730feaf80b7943

関連記事

OpenGVの用語

konashiのサンプルコードを動かしてみた

Adobeの手振れ補正機能『ワープスタビライザー』の秘密

ツールの補助で効率的に研究論文を読む

pythonの機械学習ライブラリ『scikit-learn』

Pythonの自然言語処理ライブラリ『NLTK(Natural Language Toolkit)』

Pythonのソースコードに特化した検索エンジン『Nullege』

Alice Vision:オープンソースのPhotogrammetryフレームワーク

iPhone・iPod touchで動作する知育ロボット『ROMO』

NeRF (Neural Radiance Fields):深層学習による新規視点合成

ZBrushで作った3Dモデルを立体視で確認できるVRアプリを作る

ブラウザ上でJavaScript,HTML,CSSを書いて共有するサイト『jsdo.it』

CycleGAN:ドメイン関係を学習した画像変換

UnityでTweenアニメーションを実装できる3種類の無料Asset

DCGAN (Deep Convolutional GAN):畳み込みニューラルネットワークによる敵...

OpenVDB:3Dボリュームデータ処理ライブラリ

スクレイピング

Immersive Math:線形代数をインタラクティブに学べるWebサイト

UnityプロジェクトをGitHubで管理する

Kubric:機械学習用アノテーション付き動画生成パイプライン

OpenMVSのサンプルを動かしてみる

ニューラルネットワークと深層学習

Multi-View Environment:複数画像から3次元形状を再構築するライブラリ

Unity ARKitプラグインサンプルのドキュメントを読む

ZScript

Google Chromecast

Photogrammetry (写真測量法)

C++始めようと思うんだ

SONYの自律型エンタテインメントロボット『aibo』

Runway ML:クリエイターのための機械学習ツール

PeopleSansPeople:機械学習用の人物データをUnityで生成する

OpenCV 3.1のsfmモジュールのビルド再び

UnityのGameObjectの向きをScriptで制御する

OpenCVでPhotoshopのプラグイン開発

Physics Forests:機械学習で流体シミュレーションを近似する

WordPressの表示を高速化する

YOLO (You Only Look Once):ディープラーニングによる一般物体検出手法

2D→3D復元技術で使われる用語まとめ

WordPress on Google App Engineを1週間運用してみて

Webサイトのワイヤーフレームが作成できるオンラインツール

書籍『イラストで学ぶ ディープラーニング』

RefineNet (Multi-Path Refinement Network):ディープラーニン...

コメント