TensorSpace.js:ニューラルネットワークの構造を可視化するフレームワーク

Twitterで知ったブラウザ上でインタラクティブにCNN(Convolutional Neural Network)のネットワーク構造を3Dで可視化できるオープンソースのフレームワークTensorSpace.js。ネットワーク構造だけでなく、特徴マップも可視化できる。
Apache License 2.0だそうです。

TensorSpace.js

TensorSpace.js

TensorSpaceは、TensorFlow.js, Three.js, Tween.jsで構築されたニューラルネットワークの3D視覚化フレームワークです。TensorSpaceは、ディープラーニングのレイヤー構築、訓練済みモデルの読み込み、ブラウザ上での3D可視化できるKerasライクなAPIを提供します。
TensorSpaceなら、モデルの構造とは何なのか、モデルはどのように訓練されているのか、モデルが中間情報に基づいてどのように結果を予測しているのかを直感的に学ぶことができます。
TensorSpaceでは、モデルの前処理を行うことでTensorFlow, Keras, TensorFlow.jsで事前に訓練したモデルの可視化をサポートしています。



例のごとく、ソースコードはGitHubにある↓
https://github.com/tensorspace-team/tensorspace

ドキュメントはこちら↓
https://tensorspace.org/html/docs/startIntro.html
Documentation

ただ、自分で動作環境を構築しなくてもデモページで有名なニューラルネットワーク(LeNet, AlexNet, VGG-16, ResNet-50, MobileNetv1, YOLOv2-tiny, ACGAN)の可視化を試すことができる↓
https://tensorspace.org/html/playground/index.html

LeNet

LeNet

AlexNet

AlexNet

YOLOv2-tiny

YOLOv2-tiny

ResNet-50

ResNet-50

ACGAN

ACGAN

オイラは仕組み・プロセスの可視化が大好物なので、こういう可視化ツールすごく好きです。


畳み込みニューラルネットワーク (CNN: Convolutional Neural Network)
例の書籍「ゼロから作るDeep Learning ―Pythonで学ぶディープラーニングの理論と実装」を一通り読み終わりました。「あえてPythonを使わずにUnity C#で実装しながら勉強する」とか言っておきながら、結局途中でコーディン...


高橋 啓治郎さんのGANのUnity移植もそうだったけど、この可視化実装の敷居が下がっているのはTensorFlow.jsの存在がかなり効いているんだろうか。
https://qiita.com/keijiro/items/8874c5730feaf80b7943

関連記事

PythonのHTML・XMLパーサー『BeautifulSoup』

Google App Engine上のWordPressでFlickrの画像を貼る

HD画質の無駄遣い

SSD (Single Shot Multibox Detector):ディープラーニングによる一般...

MVStudio:オープンソースのPhotogrammetryツール

ドラマ『ファーストクラス』のモーショングラフィックス

OpenCV 3.3.0-RCでsfmモジュールをビルド

SONYの自律型エンタテインメントロボット『aibo』

Houdiniのライセンスの種類

Two Minute Papers:先端研究を短時間で紹介するYouTubeチャンネル

サンプルコードにも間違いはある?

オープンソースのプリント基板設計ツール『KiCad』

手を動かしながら学ぶデータマイニング

geometry3Sharp:Unity C#で使えるポリゴン操作ライブラリ

MythTV:Linuxでテレビの視聴・録画ができるオープンソースプロジェクト

Mayaのプラグイン開発

Qlone:スマホのカメラで3Dスキャンできるアプリ

FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ

畳み込みニューラルネットワーク (CNN: Convolutional Neural Network...

Mechanizeで要認証Webサイトをスクレイピング

Theia:オープンソースのStructure from Motionライブラリ

python-twitterで自分のお気に入りを取得する

Unityで強化学習できる『Unity ML-Agents』

Amazon EC2ログイン用の秘密鍵を無くした場合の対処方法

NeRF (Neural Radiance Fields):深層学習による新規視点合成

Leap MotionでMaya上のオブジェクトを操作できるプラグイン

オープンソースの人体モデリングツール『MakeHuman』のAPI開発プロジェクトがスタート

ブラウザ上でJavaScript,HTML,CSSを書いて共有するサイト『jsdo.it』

Google App EngineでWordPress

「ベンジャミン·バトン数奇な人生」でどうやってCGの顔を作ったのか

Unity ARKitプラグインサンプルのドキュメントを読む

COLMAP:オープンソースのSfM・MVSツール

WordPressプラグインによるサイトマップの自動生成

マルコフ連鎖モンテカルロ法

Python拡張モジュールのWindows用インストーラー配布サイト

Kaolin:3Dディープラーニング用のPyTorchライブラリ

法線マップを用意してCanvas上でShadingするサンプル

Raspberry PiでIoTごっこ

uvでWindows11のPython環境を管理する

第25回コンピュータビジョン勉強会@関東に行って来た

Unityで画面タッチ・ジェスチャ入力を扱う無料Asset『TouchScript』

OpenFace:Deep Neural Networkによる顔の個人識別フレームワーク

コメント