Twitterで知ったブラウザ上でインタラクティブにCNN(Convolutional Neural Network)のネットワーク構造を3Dで可視化できるオープンソースのフレームワークTensorSpace.js。ネットワーク構造だけでなく、特徴マップも可視化できる。
Apache License 2.0だそうです。
TensorSpace.js
TensorSpaceは、TensorFlow.js, Three.js, Tween.jsで構築されたニューラルネットワークの3D視覚化フレームワークです。TensorSpaceは、ディープラーニングのレイヤー構築、訓練済みモデルの読み込み、ブラウザ上での3D可視化できるKerasライクなAPIを提供します。
TensorSpaceなら、モデルの構造とは何なのか、モデルはどのように訓練されているのか、モデルが中間情報に基づいてどのように結果を予測しているのかを直感的に学ぶことができます。
TensorSpaceでは、モデルの前処理を行うことでTensorFlow, Keras, TensorFlow.jsで事前に訓練したモデルの可視化をサポートしています。
例のごとく、ソースコードはGitHubにある↓
https://github.com/tensorspace-team/tensorspace
ドキュメントはこちら↓
https://tensorspace.org/html/docs/startIntro.html
ただ、自分で動作環境を構築しなくてもデモページで有名なニューラルネットワーク(LeNet, AlexNet, VGG-16, ResNet-50, MobileNetv1, YOLOv2-tiny, ACGAN)の可視化を試すことができる↓
https://tensorspace.org/html/playground/index.html
LeNet
AlexNet
YOLOv2-tiny
ResNet-50
ACGAN
オイラは仕組み・プロセスの可視化が大好物なので、こういう可視化ツールすごく好きです。
高橋 啓治郎さんのGANのUnity移植もそうだったけど、この可視化実装の敷居が下がっているのはTensorFlow.jsの存在がかなり効いているんだろうか。
https://qiita.com/keijiro/items/8874c5730feaf80b7943
関連記事
Boost オープンソースライブラリ
3DCG Meetup #4に行ってきた
ROSの薄い本
Paul Debevec
UnityのMonoBehaviourクラスをシングルトン化...
Googleが画像解析旅行ガイドアプリのJetpac社を買収
SONY製のニューラルネットワークライブラリ『NNabla』
OpenSfM：PythonのStructure from ...
DensePose：画像中の人物表面のUV座標を推定する
WordPressのテーマを自作する
OpenGV：画像からカメラの3次元位置・姿勢を推定するライ...
Mean Stack開発の最初の一歩
ニューラルネットワークで画像分類
OpenCVの三角測量関数『cv::triangulatep...
Google App Engineのデプロイ失敗
Raspberry Piでセンサーの常時稼働を検討する
Twitter APIのPythonラッパー『python-...
WordPressのサーバ引っ越し方法を考える
Pix2Pix：CGANによる画像変換
PyTorch3D：3Dコンピュータービジョンライブラリ
ブラウザ操作自動化ツール『Selenium』を試す
ベイズ推定とグラフィカルモデル
geometry3Sharp：Unity C#で使えるポリゴ...
Multi-View Environment：複数画像から3...
TensorFlowでCGを微分できる『TensorFlow...
Kornia：微分可能なコンピュータービジョンライブラリ
C#で使える遺伝的アルゴリズムライブラリ『GeneticSh...
Python拡張モジュールのWindows用インストーラー配...
iPadをハンディ3Dスキャナにするガジェット『iSense...
Alice Vision：オープンソースのPhotogram...
機械学習について最近知った情報
HD画質の無駄遣い
UnityでOpenCVを使うには？
Point Cloud Consortiumのセミナー「3D...
UnityでShaderの入力パラメータとして行列を渡す
オープンソースのロボットアプリケーションフレームワーク『RO...
Unityの各コンポーネント間でのやり取り
ドラマ『ファーストクラス』のモーショングラフィックス
iPhoneで3D写真が撮れるアプリ『seene』
Open Shading Language (OSL)
ブログが1日ダウンしてました
1枚の画像からマテリアルを作成できる無料ツール『Materi...
コメント