Twitterで知ったブラウザ上でインタラクティブにCNN(Convolutional Neural Network)のネットワーク構造を3Dで可視化できるオープンソースのフレームワークTensorSpace.js。ネットワーク構造だけでなく、特徴マップも可視化できる。
Apache License 2.0だそうです。
TensorSpace.js
TensorSpaceは、TensorFlow.js, Three.js, Tween.jsで構築されたニューラルネットワークの3D視覚化フレームワークです。TensorSpaceは、ディープラーニングのレイヤー構築、訓練済みモデルの読み込み、ブラウザ上での3D可視化できるKerasライクなAPIを提供します。
TensorSpaceなら、モデルの構造とは何なのか、モデルはどのように訓練されているのか、モデルが中間情報に基づいてどのように結果を予測しているのかを直感的に学ぶことができます。
TensorSpaceでは、モデルの前処理を行うことでTensorFlow, Keras, TensorFlow.jsで事前に訓練したモデルの可視化をサポートしています。
例のごとく、ソースコードはGitHubにある↓
https://github.com/tensorspace-team/tensorspace
ドキュメントはこちら↓
https://tensorspace.org/html/docs/startIntro.html
ただ、自分で動作環境を構築しなくてもデモページで有名なニューラルネットワーク(LeNet, AlexNet, VGG-16, ResNet-50, MobileNetv1, YOLOv2-tiny, ACGAN)の可視化を試すことができる↓
https://tensorspace.org/html/playground/index.html
LeNet
AlexNet
YOLOv2-tiny
ResNet-50
ACGAN
オイラは仕組み・プロセスの可視化が大好物なので、こういう可視化ツールすごく好きです。
高橋 啓治郎さんのGANのUnity移植もそうだったけど、この可視化実装の敷居が下がっているのはTensorFlow.jsの存在がかなり効いているんだろうか。
https://qiita.com/keijiro/items/8874c5730feaf80b7943
関連記事
OpenCVの顔検出過程を可視化した動画
HD画質の無駄遣い
オープンソースの取引プラットフォーム
画像認識による位置情報取得 - Semi-Direct Mo...
Structure from Motion (多視点画像から...
OpenGVの用語
2D→3D復元技術で使われる用語まとめ
Unreal Engineの薄い本
LuxCoreRender：オープンソースの物理ベースレンダ...
成果を待てない長学歴化の時代
機械学習について最近知った情報
AfterEffectsプラグイン開発
ZBrushのZScript入門
Houdiniのライセンスの種類
Physics Forests：機械学習で流体シミュレーショ...
UnityでOpenCVを使うには？
Theia：オープンソースのStructure from M...
タマムシっぽい質感
Blender 2.8がついに正式リリース！
Mayaのプラグイン開発
ポリゴンジオメトリ処理ライブラリ『pmp-library (...
SONYの自律型エンタテインメントロボット『aibo』
写真に3Dオブジェクトを違和感無く合成する『3DPhotoM...
網元AMIで作ったWordpressサイトのインスタンスをt...
Unityで画面タッチ・ジェスチャ入力を扱う無料Asset『...
PyTorch3D：3Dコンピュータービジョンライブラリ
オープンソースのIT資産・ライセンス管理システム『Snipe...
MeshLab：3Dオブジェクトの確認・変換に便利なフリーウ...
マルコフ連鎖モンテカルロ法
WordPressの表示を高速化する
MeshroomでPhotogrammetry
ROMOハッカソンに行ってきた
統計的な顔モデル
Webサイトのワイヤーフレームが作成できるオンラインツール
OpenCV バージョン4がリリースされた！
機械学習手法『Random Forest』
Blendify：コンピュータービジョン向けBlenderラ...
BlenderでPhotogrammetryできるアドオン
第1回 3D勉強会＠関東『SLAMチュートリアル大会』
COLMAP：オープンソースのSfM・MVSツール
オープンソースの顔認識フレームワーク『OpenBR』
OpenCV 3.1のsfmモジュールを試す
コメント