SVM (Support Vector Machine)

久しぶりの機械学習ネタ。

Deep Learningが何かと話題の昨今ですが、実用方面ではSVMやRandom Forestなどの古典的な手法が活躍しているらしい。
それなら、古典を学べば身近なところですぐに応用ができるのではないかと思い始めた。リッチな処理じゃなくて、すごく質素な単純作業か何かが自動化できたら面白いなぁ、と。(機械学習の古典的手法というとむしろニューラルネットワークの方らしいけど)

Random Forestについては前に勉強したからそれなりに理解しているので、今回はSVMについて理解を深めておこうと思う。



この記事に触発されたというのもあります。↓

C++によるSMOを用いたSVMの実装

機械学習の手法にはいろいろありますが、その中でもサポートベクトルマシン(SVM; support vector machine)は高い精度で知られる有名な手法です。
以前C++で多層パーセプトロンを実装したので、今度はSVMをC++で実装してみました。

というか、この記事で非常にわかりやすく解説されているので、もうあんまりやることがない(笑)



SVMのような古典的な手法なら、以前見つけたMLDemosというツールに実装されているので、これをいじって試してみる。



少し調べてみたら、SVMを実装したLIBSVMっていうメジャーなライブラリがあるみたい↓

LIBSVM — A Library for Support Vector Machines

LIBSVM

LIBSVMは、サポートベクトルの分類(C-SVC、NU-SVC)、回帰(イプシロン – SVR、NU-SVR)と分布推定(1クラスSVM)のための統合ソフトウェアで、マルチクラス分類をサポートしています。

ソースコードはGitHubにもある。色々な言語へのインターフェイスを用意しているみたいだけど、コアは読めなくもない量だ。
これ、javascriptでも動くのか。Wikipediaによると、Pythonの機械画集ライブラリscikit-learnもこのLIBSVMを利用しているらしい。

関連記事

オープンソースの顔認識フレームワーク『OpenBR』

Unityで強化学習できる『Unity ML-Agents』

TensorSpace.js:ニューラルネットワークの構造を...

BGSLibrary:OpenCVベースの背景差分ライブラリ

スクレイピング

WebGL開発に関する情報が充実してきている

Dlib:C++の機械学習ライブラリ

Kubric:機械学習用アノテーション付き動画生成パイプライ...

UnityでLight Shaftを表現する

ニューラルネットワークで画像分類

Accord.NET Framework:C#で使える機械学...

ROSの薄い本

プログラミングスキルとは何か?

WinSCP

FacebookがDeep learningツールの一部をオ...

AmazonEC2のインスタンスをt1.microからt2....

UnityプロジェクトをGitHubで管理する

UnityでTweenアニメーションを実装できる3種類の無料...

MythTV:Linuxでテレビの視聴・録画ができるオープン...

UnityのMonoBehaviourクラスをシングルトン化...

Mitsuba 2:オープンソースの物理ベースレンダラ

Composition Rendering:Blenderに...

自前のShaderがおかしい件

マルコフ連鎖モンテカルロ法

ニューラルネットワークと深層学習

Human Generator:Blenderの人体生成アド...

OpenCV 3.1から追加されたSfMモジュール

Python.NET:Pythonと.NETを連携させるパッ...

フォトンの放射から格納までを可視化した動画

OpenMayaのPhongShaderクラス

MPFB2:Blenderの人体モデリングアドオン

GAN (Generative Adversarial Ne...

画像生成AI Stable Diffusionで遊ぶ

FCN (Fully Convolutional Netwo...

DUSt3R:3Dコンピュータービジョンの基盤モデル

OpenMVSのサンプルを動かしてみる

3Dモデルを立体視で確認できるVRアプリを作っている

ディープラーニング

Unreal Engineの薄い本

組み込み向けのWindows OS 『Windows Emb...

Unityからkonashiをコントロールする

OpenMesh:オープンソースの3Dメッシュデータライブラ...

コメント