TensorSpace.js:ニューラルネットワークの構造を可視化するフレームワーク

Twitterで知ったブラウザ上でインタラクティブにCNN(Convolutional Neural Network)のネットワーク構造を3Dで可視化できるオープンソースのフレームワークTensorSpace.js。ネットワーク構造だけでなく、特徴マップも可視化できる。
Apache License 2.0だそうです。

TensorSpace.js

TensorSpace.js

TensorSpaceは、TensorFlow.js, Three.js, Tween.jsで構築されたニューラルネットワークの3D視覚化フレームワークです。TensorSpaceは、ディープラーニングのレイヤー構築、訓練済みモデルの読み込み、ブラウザ上での3D可視化できるKerasライクなAPIを提供します。
TensorSpaceなら、モデルの構造とは何なのか、モデルはどのように訓練されているのか、モデルが中間情報に基づいてどのように結果を予測しているのかを直感的に学ぶことができます。
TensorSpaceでは、モデルの前処理を行うことでTensorFlow, Keras, TensorFlow.jsで事前に訓練したモデルの可視化をサポートしています。


スポンサーリンク


例のごとく、ソースコードはGitHubにある↓
https://github.com/tensorspace-team/tensorspace

ドキュメントはこちら↓
https://tensorspace.org/html/docs/startIntro.html
Documentation

ただ、自分で動作環境を構築しなくてもデモページで有名なニューラルネットワーク(LeNet, AlexNet, VGG-16, ResNet-50, MobileNetv1, YOLOv2-tiny, ACGAN)の可視化を試すことができる↓
https://tensorspace.org/html/playground/index.html


スポンサーリンク
LeNet

LeNet

AlexNet

AlexNet

YOLOv2-tiny

YOLOv2-tiny

ResNet-50

ResNet-50

ACGAN

ACGAN

オイラは仕組み・プロセスの可視化が大好物なので、こういう可視化ツールすごく好きです。


畳み込みニューラルネットワーク (CNN: Convolutional Neural Network)
例の書籍「ゼロから作るDeep Learning ―Pythonで学ぶディープラーニングの理論と実装」を一通り読み終わりました。「あえてPythonを使わずにUnity C#で実装しながら勉強する」とか言っておきながら、結局途中でコーディン...


高橋 啓治郎さんのGANのUnity移植もそうだったけど、この可視化実装の敷居が下がっているのはTensorFlow.jsの存在がかなり効いているんだろうか。
https://qiita.com/keijiro/items/8874c5730feaf80b7943


スポンサーリンク

関連記事

UnityのTransformクラスについて調べてみた

cvui:OpenCVのための軽量GUIライブラリ

このブログのデザインに飽きてきた

ブラウザ上でJavaScript,HTML,CSSを書いて共有するサイト『jsdo.it』

ZScript

UnityでARKit2.0

コンピュータビジョンの技術マップ

OpenMesh:オープンソースの3Dメッシュデータライブラリ

WordPressのテーマを自作する

iPhoneで3D写真が撮れるアプリ『seene』

Raspberry Pi 2のGPIOピン配置

Point Cloud Libraryに動画フォーマットが追加されるらしい

Runway ML:クリエイターのための機械学習ツール

ZBrushトレーニング

Iridescence:プロトタイピング向け軽量3D可視化ライブラリ

OpenCV

Webサイトのワイヤーフレームが作成できるオンラインツール

Mechanizeで要認証Webサイトをスクレイピング

3Dモデルを立体視で確認できるVRアプリを作っている

iOSデバイスと接続して連携するガジェットの開発方法

Javaで作られたオープンソースの3DCGレンダラ『Sunflow』

Pythonの自然言語処理ライブラリ『NLTK(Natural Language Toolkit)』

MVStudio:オープンソースのPhotogrammetryツール

Open3D:3Dデータ処理ライブラリ

Digital Emily Project:人間の顔をそっくりそのままCGで復元する

ベイズ推定とグラフィカルモデル

マルコフ連鎖モンテカルロ法

機械学習での「回帰」とは?

PythonのHTML・XMLパーサー『BeautifulSoup』

UnityでShaderの入力パラメータとして行列を渡す

Theia:オープンソースのStructure from Motionライブラリ

ManuelBastioniLAB:人体モデリングできるBlenderアドオン

SSII2014 チュートリアル講演会の資料

ManimML:機械学習の概念を視覚的に説明するためのライブラリ

Kornia:微分可能なコンピュータービジョンライブラリ

MB-Lab:Blenderの人体モデリングアドオン

libigl:軽量なジオメトリ処理ライブラリ

OpenCLに対応したオープンソースの物理ベースレンダラ『LuxRender(ルクスレンダー)』

konashiのサンプルコードを動かしてみた

OpenCVで顔のランドマークを検出する『Facemark API』

C++の抽象クラス

組み込み向けのWindows OS 『Windows Embedded』

コメント