SVM (Support Vector Machine)

久しぶりの機械学習ネタ。

Deep Learningが何かと話題の昨今ですが、実用方面ではSVMやRandom Forestなどの古典的な手法が活躍しているらしい。
それなら、古典を学べば身近なところですぐに応用ができるのではないかと思い始めた。リッチな処理じゃなくて、すごく質素な単純作業か何かが自動化できたら面白いなぁ、と。(機械学習の古典的手法というとむしろニューラルネットワークの方らしいけど)

Random Forestについては前に勉強したからそれなりに理解しているので、今回はSVMについて理解を深めておこうと思う。



この記事に触発されたというのもあります。↓

C++によるSMOを用いたSVMの実装

機械学習の手法にはいろいろありますが、その中でもサポートベクトルマシン(SVM; support vector machine)は高い精度で知られる有名な手法です。
以前C++で多層パーセプトロンを実装したので、今度はSVMをC++で実装してみました。

というか、この記事で非常にわかりやすく解説されているので、もうあんまりやることがない(笑)



SVMのような古典的な手法なら、以前見つけたMLDemosというツールに実装されているので、これをいじって試してみる。



少し調べてみたら、SVMを実装したLIBSVMっていうメジャーなライブラリがあるみたい↓

LIBSVM — A Library for Support Vector Machines

LIBSVM

LIBSVMは、サポートベクトルの分類(C-SVC、NU-SVC)、回帰(イプシロン – SVR、NU-SVR)と分布推定(1クラスSVM)のための統合ソフトウェアで、マルチクラス分類をサポートしています。

ソースコードはGitHubにもある。色々な言語へのインターフェイスを用意しているみたいだけど、コアは読めなくもない量だ。
これ、javascriptでも動くのか。Wikipediaによると、Pythonの機械画集ライブラリscikit-learnもこのLIBSVMを利用しているらしい。

関連記事

3D復元技術の情報リンク集

viser:Pythonで使える3D可視化ライブラリ

Mitsuba 2:オープンソースの物理ベースレンダラ

WordPressのテーマを自作する

立体視を試してみた

OpenGV:画像からカメラの3次元位置・姿勢を推定するライ...

Unreal Engineの薄い本

Point Cloud Utils:Pythonで3D点群・...

AfterEffectsプラグイン開発

OpenCV 3.1とopencv_contribモジュール...

TorchStudio:PyTorchのための統合開発環境と...

Structure from Motion (多視点画像から...

畳み込みニューラルネットワーク (CNN: Convolut...

なんかすごいサイト

C#で使える遺伝的アルゴリズムライブラリ『GeneticSh...

OpenCVで顔のモーフィングを実装する

科学技術計算向けスクリプト言語『Julia』

U-Net:ディープラーニングによるSemantic Seg...

SONYの自律型エンタテインメントロボット『aibo』

WordPress on Windows Azure

Raspberry PiのGPIOを操作するPythonライ...

自前のShaderがおかしい件

Model View Controller

Live CV:インタラクティブにComputer Visi...

第1回 3D勉強会@関東『SLAMチュートリアル大会』

Google App Engine上のWordPressでA...

Deep Learningとその他の機械学習手法の性能比較

OpenCVの超解像(SuperResolution)モジュ...

Amazon Web ServicesでWordPress

Raspberry PiでIoTごっこ

NumSharp:C#で使えるNumPyライクな数値計算ライ...

Pythonの自然言語処理ライブラリ『NLTK(Natura...

Unity MonoBehaviourクラスのオーバーライド...

ブログの復旧が難航してた話

MythTV:Linuxでテレビの視聴・録画ができるオープン...

OpenCVでiPhone6sのカメラをキャリブレーションす...

HD画質の無駄遣い その2

WordPressプラグインの作り方

OpenGVの用語

手を動かしながら学ぶデータマイニング

konashiのサンプルコードを動かしてみた

Mayaのレンダリング アトリビュート

コメント