SVM (Support Vector Machine)

久しぶりの機械学習ネタ。

Deep Learningが何かと話題の昨今ですが、実用方面ではSVMやRandom Forestなどの古典的な手法が活躍しているらしい。
それなら、古典を学べば身近なところですぐに応用ができるのではないかと思い始めた。リッチな処理じゃなくて、すごく質素な単純作業か何かが自動化できたら面白いなぁ、と。(機械学習の古典的手法というとむしろニューラルネットワークの方らしいけど)

Random Forestについては前に勉強したからそれなりに理解しているので、今回はSVMについて理解を深めておこうと思う。



この記事に触発されたというのもあります。↓

C++によるSMOを用いたSVMの実装

機械学習の手法にはいろいろありますが、その中でもサポートベクトルマシン(SVM; support vector machine)は高い精度で知られる有名な手法です。
以前C++で多層パーセプトロンを実装したので、今度はSVMをC++で実装してみました。

というか、この記事で非常にわかりやすく解説されているので、もうあんまりやることがない(笑)



SVMのような古典的な手法なら、以前見つけたMLDemosというツールに実装されているので、これをいじって試してみる。



少し調べてみたら、SVMを実装したLIBSVMっていうメジャーなライブラリがあるみたい↓

LIBSVM — A Library for Support Vector Machines

LIBSVM

LIBSVMは、サポートベクトルの分類(C-SVC、NU-SVC)、回帰(イプシロン – SVR、NU-SVR)と分布推定(1クラスSVM)のための統合ソフトウェアで、マルチクラス分類をサポートしています。

ソースコードはGitHubにもある。色々な言語へのインターフェイスを用意しているみたいだけど、コアは読めなくもない量だ。
これ、javascriptでも動くのか。Wikipediaによると、Pythonの機械画集ライブラリscikit-learnもこのLIBSVMを利用しているらしい。

関連記事

ドットインストールのWordPress入門レッスン

ポリゴン用各種イテレータと関数セット

マンガで分かる JavaScriptプログラミング講座

動的なメモリの扱い

UnityのTransformクラスについて調べてみた

OpenGVのライブラリ構成

FreeMoCap Project:オープンソースのマーカー...

手を動かしながら学ぶデータマイニング

ZBrushで作った3Dモデルを立体視で確認できるVRアプリ...

なんかすごいサイト

Unityからkonashiをコントロールする

Raspberry Pi 2のGPIOピン配置

Google XML Sitemap Generatorプラ...

Verilog HDL

FacebookがDeep learningツールの一部をオ...

書籍『ROSプログラミング』

機械学習での「回帰」とは?

ブログをGoogle App EngineからAmazon ...

OpenCV

Konashiを買った

UnityからROSを利用できる『ROS#』

COLMAP:オープンソースのSfM・MVSツール

Pythonのソースコードに特化した検索エンジン『Nulle...

今年もSSII

Kaolin:3Dディープラーニング用のPyTorchライブ...

Python for Unity:UnityEditorでP...

OpenCV 3.3.0-RCでsfmモジュールをビルド

Windows10でPyTorchをインストールしてVSCo...

OpenCVの超解像(SuperResolution)モジュ...

Quartus II

OpenCV 3.1から追加されたSfMモジュール

openMVGをWindows10 Visual Studi...

FCN (Fully Convolutional Netwo...

Fast R-CNN:ディープラーニングによる一般物体検出手...

UnityのMonoBehaviourクラスをシングルトン化...

Raspberry Pi 2を買いました

LuxCoreRender:オープンソースの物理ベースレンダ...

Unityで画面タッチ・ジェスチャ入力を扱う無料Asset『...

AmazonEC2のインスタンスをt1.microからt2....

CGレンダラ研究開発のためのフレームワーク『Lightmet...

OpenMVS:Multi-View Stereoによる3次...

DCGAN (Deep Convolutional GAN)...

コメント