SVM (Support Vector Machine)

久しぶりの機械学習ネタ。

Deep Learningが何かと話題の昨今ですが、実用方面ではSVMやRandom Forestなどの古典的な手法が活躍しているらしい。
それなら、古典を学べば身近なところですぐに応用ができるのではないかと思い始めた。リッチな処理じゃなくて、すごく質素な単純作業か何かが自動化できたら面白いなぁ、と。(機械学習の古典的手法というとむしろニューラルネットワークの方らしいけど)

Random Forestについては前に勉強したからそれなりに理解しているので、今回はSVMについて理解を深めておこうと思う。



この記事に触発されたというのもあります。↓

C++によるSMOを用いたSVMの実装

機械学習の手法にはいろいろありますが、その中でもサポートベクトルマシン(SVM; support vector machine)は高い精度で知られる有名な手法です。
以前C++で多層パーセプトロンを実装したので、今度はSVMをC++で実装してみました。

というか、この記事で非常にわかりやすく解説されているので、もうあんまりやることがない(笑)



SVMのような古典的な手法なら、以前見つけたMLDemosというツールに実装されているので、これをいじって試してみる。



少し調べてみたら、SVMを実装したLIBSVMっていうメジャーなライブラリがあるみたい↓

LIBSVM — A Library for Support Vector Machines

LIBSVM

LIBSVMは、サポートベクトルの分類(C-SVC、NU-SVC)、回帰(イプシロン – SVR、NU-SVR)と分布推定(1クラスSVM)のための統合ソフトウェアで、マルチクラス分類をサポートしています。

ソースコードはGitHubにもある。色々な言語へのインターフェイスを用意しているみたいだけど、コアは読めなくもない量だ。
これ、javascriptでも動くのか。Wikipediaによると、Pythonの機械画集ライブラリscikit-learnもこのLIBSVMを利用しているらしい。

関連記事

書籍『仕事ではじめる機械学習』を読みました

MLDemos:機械学習について理解するための可視化ツール

MFnMeshクラスのsplit関数

OpenVDB:3Dボリュームデータ処理ライブラリ

iOSで使えるJetpac社の物体認識SDK『DeepBel...

Javaで作られたオープンソースの3DCGレンダラ『Sunf...

CGのためのディープラーニング

オープンソースのロボットアプリケーションフレームワーク『RO...

Cartographer:オープンソースのSLAMライブラリ

FreeMoCap Project:オープンソースのマーカー...

Zibra Liquids:Unity向け流体シミュレーショ...

OpenCVのfindEssentialMat関数を使ったサ...

IronPythonを使ってUnity上でPythonのコー...

Konashiを買った

Python for Unity:UnityEditorでP...

第1回 3D勉強会@関東『SLAMチュートリアル大会』

タマムシっぽい質感

機械学習で遊ぶ

機械学習手法『Random Forest』

PythonのHTML・XMLパーサー『BeautifulS...

MFnDataとMFnAttribute

ブラウザ上でJavaScript,HTML,CSSを書いて共...

OpenAR:OpenCVベースのマーカーARライブラリ

サンプルコードにも間違いはある?

Amazon EC2ログイン用の秘密鍵を無くした場合の対処方...

Iterator

Point Cloud Utils:Pythonで3D点群・...

スクレイピング

OpenCVのバージョン3が正式リリースされたぞ

Google App Engine上のWordPressでF...

UnityのTransformクラスについて調べてみた

書籍『イラストで学ぶ ディープラーニング』

TeleSculptor:空撮動画からPhotogramme...

Live CV:インタラクティブにComputer Visi...

参考書

Mayaのレンダリング アトリビュート

頭蓋骨からの顔復元と進化過程の可視化

GAN (Generative Adversarial Ne...

Webサイトのワイヤーフレームが作成できるオンラインツール

PyMC:Pythonのベイズ統計ライブラリ

Facebookの顔認証技術『DeepFace』

pythonもかじってみようかと

コメント