ニューラルネットワークの構造を可視化するフレームワーク『TensorSpace.js』

Twitterで知ったブラウザ上でインタラクティブにCNN(Convolutional Neural Network)のネットワーク構造を3Dで可視化できるオープンソースのフレームワークTensorSpace.js。ネットワーク構造だけでなく、特徴マップも可視化できる。
Apache License 2.0だそうです。

TensorSpace.js

TensorSpace.js

TensorSpaceは、TensorFlow.js, Three.js, Tween.jsで構築されたニューラルネットワークの3D視覚化フレームワークです。TensorSpaceは、ディープラーニングのレイヤー構築、訓練済みモデルの読み込み、ブラウザ上での3D可視化できるKerasライクなAPIを提供します。
TensorSpaceなら、モデルの構造とは何なのか、モデルはどのように訓練されているのか、モデルが中間情報に基づいてどのように結果を予測しているのかを直感的に学ぶことができます。
TensorSpaceでは、モデルの前処理を行うことでTensorFlow, Keras, TensorFlow.jsで事前に訓練したモデルの可視化をサポートしています。


スポンサーリンク


例のごとく、ソースコードはGitHubにある↓
https://github.com/tensorspace-team/tensorspace

ドキュメントはこちら↓
https://tensorspace.org/html/docs/startIntro.html
Documentation

ただ、自分で動作環境を構築しなくてもデモページで有名なニューラルネットワーク(LeNet, AlexNet, VGG-16, ResNet-50, MobileNetv1, YOLOv2-tiny, ACGAN)の可視化を試すことができる↓
https://tensorspace.org/html/playground/index.html


スポンサーリンク
LeNet

LeNet

AlexNet

AlexNet

YOLOv2-tiny

YOLOv2-tiny

ResNet-50

ResNet-50

ACGAN

ACGAN

オイラは仕組み・プロセスの可視化が大好物なので、こういう可視化ツールすごく好きです。


畳み込みニューラルネットワーク (CNN:Convolutional Neural Network)
例の書籍「ゼロから作るDeep Learning ―Pythonで学ぶディープラーニングの理論と実装」を一通り読み終わりました。「あえてPythonを使わずにUnity C#で実装しながら勉強する」とか言っておきながら、結局途中で...


高橋 啓治郎さんのGANのUnity移植もそうだったけど、この可視化実装の敷居が下がっているのはTensorFlow.jsの存在がかなり効いているんだろうか。
https://qiita.com/keijiro/items/8874c5730feaf80b7943


スポンサーリンク

関連記事

Blenderの人体モデリングアドオン『MB-Lab』
プログラムによる景観の自動生成
疑似3D写真が撮れるiPhoneアプリ『Seene』がアップデートでついにフル3Dモデルが撮影できる...
ポリゴンジオメトリ処理ライブラリ『pmp-library (Polygon Mesh Process...
WordPressの表示を高速化する
まだ続くブログの不調
『Deep Fluids』流体シミュレーションをディープラーニングで近似する
PythonでMayaのShapeノードプラグインを作る
ドットインストールのWordPress入門レッスン
Unity ARKitプラグインサンプルのチュートリアルを読む
Autodesk Mementoでゴジラを3次元復元する
WordPressで数式を扱う
2D→3D復元技術で使われる用語まとめ
書籍『OpenCV 3 プログラミングブック』を購入
OpenCVでPhotoshopのプラグイン開発
Unityの各コンポーネント間でのやり取り
第25回コンピュータビジョン勉強会@関東に行って来た
OpenCV 3.3.0-RCでsfmモジュールをビルド
スマホのカメラで3Dスキャンできるアプリ『Qlone』
ニューラルネットワークで画像分類
SegNet:ディープラーニングによるSemantic Segmentation手法
動画で学ぶお絵かき講座『sensei』
東京オリンピックと案内表示
WordPressプラグインによるサイトマップの自動生成
書籍『3次元コンピュータビジョン計算ハンドブック』を購入
Unity Scriptコーディング→Unreal Engine Scriptコーディング
WordPressのサーバ引っ越し方法を考える
C++ 標準テンプレートライブラリ (STL)
ドラマ『ファーストクラス』のモーショングラフィックス
人体モデリングできるBlenderアドオン『ManuelBastioniLAB』
FCN (Fully Convolutional Network):ディープラーニングによるSema...
画像処理を基礎から学べるキーエンスのサイト『画像道場』
Unityの薄い本
html5のcanvasの可能性
オープンソースのSfM・MVSツール『COLMAP』
Verilog HDL
OpenGVの用語
機械学習について理解するための可視化ツール『MLDemos』
書籍『ROSプログラミング』
このブログのデザインに飽きてきた
Unity MonoBehaviourクラスのオーバーライド関数が呼び出される順番
YOLO (You Only Look Once):ディープラーニングによる一般物体検出手法

コメント