SVM (Support Vector Machine)

久しぶりの機械学習ネタ。

Deep Learningが何かと話題の昨今ですが、実用方面ではSVMやRandom Forestなどの古典的な手法が活躍しているらしい。
それなら、古典を学べば身近なところですぐに応用ができるのではないかと思い始めた。リッチな処理じゃなくて、すごく質素な単純作業か何かが自動化できたら面白いなぁ、と。(機械学習の古典的手法というとむしろニューラルネットワークの方らしいけど)

Random Forestについては前に勉強したからそれなりに理解しているので、今回はSVMについて理解を深めておこうと思う。



この記事に触発されたというのもあります。↓

C++によるSMOを用いたSVMの実装

機械学習の手法にはいろいろありますが、その中でもサポートベクトルマシン(SVM; support vector machine)は高い精度で知られる有名な手法です。
以前C++で多層パーセプトロンを実装したので、今度はSVMをC++で実装してみました。

というか、この記事で非常にわかりやすく解説されているので、もうあんまりやることがない(笑)



SVMのような古典的な手法なら、以前見つけたMLDemosというツールに実装されているので、これをいじって試してみる。



少し調べてみたら、SVMを実装したLIBSVMっていうメジャーなライブラリがあるみたい↓

LIBSVM — A Library for Support Vector Machines

LIBSVM

LIBSVMは、サポートベクトルの分類(C-SVC、NU-SVC)、回帰(イプシロン – SVR、NU-SVR)と分布推定(1クラスSVM)のための統合ソフトウェアで、マルチクラス分類をサポートしています。

ソースコードはGitHubにもある。色々な言語へのインターフェイスを用意しているみたいだけど、コアは読めなくもない量だ。
これ、javascriptでも動くのか。Wikipediaによると、Pythonの機械画集ライブラリscikit-learnもこのLIBSVMを利用しているらしい。

関連記事

libigl:軽量なジオメトリ処理ライブラリ

Rerun:マルチモーダルデータの可視化アプリとSDK

OpenCVで顔のモーフィングを実装する

OpenMVS:Multi-View Stereoによる3次...

AR (Augmented Reality)とDR (Dim...

Structure from Motion (多視点画像から...

Pythonのソースコードに特化した検索エンジン『Nulle...

法線マップを用意してCanvas上でShadingするサンプ...

Iridescence:プロトタイピング向け軽量3D可視化ラ...

まだ続くブログの不調

このブログのデザインに飽きてきた

pythonもかじってみようかと

Amazon EC2ログイン用の秘密鍵を無くした場合の対処方...

Maya API Reference

MFnDataとMFnAttribute

機械学習のオープンソースソフトウェアフォーラム『mloss(...

科学技術計算向けスクリプト言語『Julia』

C++の抽象クラス

Python for Unity:UnityEditorでP...

Google App Engine上のWordPressでA...

OpenCVの三角測量関数『cv::triangulatep...

ZBrushのZScript入門

Mayaのシェーディングノードの区分

PyMC:Pythonのベイズ統計ライブラリ

Amazon Web ServicesでWordPress

OANDAのfxTrade API

PSPNet (Pyramid Scene Parsing ...

Super Resolution:OpenCVの超解像処理モ...

OpenCV 3.1とopencv_contribモジュール...

Physics Forests:機械学習で流体シミュレーショ...

CGAN (Conditional GAN):条件付き敵対的...

マルコフ連鎖モンテカルロ法

畳み込みニューラルネットワーク (CNN: Convolut...

OpenCV 3.1から追加されたSfMモジュール

Live CV:インタラクティブにComputer Visi...

Multi-View Environment:複数画像から3...

機械学習に役立つPythonライブラリ一覧

SONY製のニューラルネットワークライブラリ『NNabla』

スクラッチで既存のキャラクターを立体化したい

Model View Controller

オープンソースの顔の動作解析ツールキット『OpenFace』

3DCG Meetup #4に行ってきた

コメント