書籍『ゼロから作るDeep Learning』で自分なりに学ぶ

もう1年以上前になりますが、書籍「イラストで学ぶ ディープラーニング」を購入して少しずつ読み進めていたのです。↓



ところが、読み進めている途中で壁にぶち当たりました。この書籍、途中からどんどん数式率が上がって行き、あんまりイラストで教えてくれなくなるんですよ(笑)

数式が苦手だから「イラストで学ぶ」に期待していたのですが、考えが甘かったようです。
載っているサンプルコードは各種Deep Learningライブラリの使い方なので、肝心の仕組みは当然隠蔽されていて、そこから仕組みを理解するのは難しい。(ライブラリの使い方を覚えられる分実践的なんだけどね)

なので、実装しながら仕組みを理解していく方針に切り替えることにした。
ということで、こちらの書籍に頼ることにしました↓ (すぐ書籍買っちゃう)

ゼロから作るDeep Learning ―Pythonで学ぶディープラーニングの理論と実装

Pythonのサンプルコードと、書籍の正誤表はGitHubにある↓
https://github.com/oreilly-japan/deep-learning-from-scratch
https://github.com/oreilly-japan/deep-learning-from-scratch/wiki/errata

これでディープラーニングを作れる(笑)



書籍のサンプルコードはPythonですが、そこは慣れたUnity(というかC#)環境に置き換えて学ぼうと思い、PythonのNumPyに代わる数値計算ライブラリを探していたのでした。
Math.NET Numerics:Unityで使える数値計算ライブラリ
立て続けにUnityの話題ですが。数学的なことをUnityで勉強しようかなという気分になってきた。お勉強用途だと最近はPython、というかPythonのNumPyが手軽で良く使われてるイメージ。Unityでも使える数値計算ライブラリが無い...


で、Math.NET Numerics導入後に少し調べたら、似た発想の人がいた↓
http://tnakamura.hatenablog.com/entry/2016/12/05/perceptron
http://tnakamura.hatenablog.com/entry/2016/12/08/sigmoid-relu-softmax
http://tnakamura.hatenablog.com/entry/2016/12/15/mnist
http://tnakamura.hatenablog.com/entry/2016/12/16/three-layer-neural-network
http://tnakamura.hatenablog.com/entry/2017/01/30/loss-function
http://tnakamura.hatenablog.com/entry/2017/02/08/numerical-differentiation
http://tnakamura.hatenablog.com/entry/2017/02/10/numeric-gradient
http://tnakamura.hatenablog.com/entry/2017/02/15/gradient-descent
http://tnakamura.hatenablog.com/entry/2017/02/20/gradient-simplenet
https://github.com/snaga/DeepLearning_C_Sharp

せっかくなので実装の参考にさせていただこう。Math.NET Numericsの使い方を知るのに良いサンプルだ。
Unity上で動作の仕組みを可視化できたら最高なんだが、そこまで行けるだろうか。

2019年 追記:今ならMath.NET Numericsじゃなくて、このNumSharpを使った方が良いと思う↓
NumSharp:C#で使えるNumPyライクな数値計算ライブラリ
C#で書かれたNumPy風の数値計算ライブラリ。Apache License 2.0だそうです。NumSharpNumSharpは.NET StandardをターゲットとしたNumPyのC#ポートです。NumSharpはC#で科学計算を行う...

パーセプトロン、ニューラルネットワークのイメージ

書籍とは関係ないけど、パーセプトロン、ニューラルネットワークの働きをビジュアル化するとこんなイメージらしい↓



色んなアルゴリズムをこんな感じで可視化できると理解が捗るだろうなぁ。

関連記事

Caffe:読みやすくて高速なディープラーニングのフレームワ...

konashiのサンプルコードを動かしてみた

SSII 2014 デモンストレーションセッションのダイジェ...

ROSの薄い本

Google XML Sitemap Generatorプラ...

Zibra Liquids:Unity向け流体シミュレーショ...

SONYの自律型エンタテインメントロボット『aibo』

Polyscope:3Dデータ操作用GUIライブラリ

書籍『人生は、運よりも実力よりも「勘違いさせる力」で決まって...

Kubric:機械学習用アノテーション付き動画生成パイプライ...

cvui:OpenCVのための軽量GUIライブラリ

書籍『ピクサー流 創造するちから』読了

書籍『天才を殺す凡人』読了

書籍『ジ・アート・オブ・シン・ゴジラ』の発売日が2016年1...

東京オリンピックと案内表示

Webサイトのワイヤーフレームが作成できるオンラインツール

Theia:オープンソースのStructure from M...

OpenCV

WordPressのテーマを自作する

法線マップを用意してCanvas上でShadingするサンプ...

RSSフィードを読込んで表示するWordpressプラグイン...

書籍『OpenCV 3 プログラミングブック』を購入

読書は趣味か?

OANDAのfxTrade API

注文してた本が届いた

Unityで360度ステレオVR動画を作る

Unityで強化学習できる『Unity ML-Agents』

Mayaのプラグイン開発

fSpy:1枚の写真からカメラパラメーターを割り出すツール

OpenCVでPhotoshopのプラグイン開発

ブログのデザイン変えました

プログラミングスキルとは何か?

OpenSfM:PythonのStructure from ...

Geogram:C++の3D幾何アルゴリズムライブラリ

顔追跡による擬似3D表示『Dynamic Perspecti...

Iridescence:プロトタイピング向け軽量3D可視化ラ...

iPhoneアプリ開発 Xcode 5のお作法

書籍『開田裕治 怪獣イラストテクニック』

OpenCV 3.1とopencv_contribモジュール...

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

OpenMVS:Multi-View Stereoによる3次...

Google Colaboratoryで遊ぶ準備

コメント