SVM (Support Vector Machine)

久しぶりの機械学習ネタ。

Deep Learningが何かと話題の昨今ですが、実用方面ではSVMやRandom Forestなどの古典的な手法が活躍しているらしい。
それなら、古典を学べば身近なところですぐに応用ができるのではないかと思い始めた。リッチな処理じゃなくて、すごく質素な単純作業か何かが自動化できたら面白いなぁ、と。(機械学習の古典的手法というとむしろニューラルネットワークの方らしいけど)

Random Forestについては前に勉強したからそれなりに理解しているので、今回はSVMについて理解を深めておこうと思う。



この記事に触発されたというのもあります。↓

C++によるSMOを用いたSVMの実装

機械学習の手法にはいろいろありますが、その中でもサポートベクトルマシン(SVM; support vector machine)は高い精度で知られる有名な手法です。
以前C++で多層パーセプトロンを実装したので、今度はSVMをC++で実装してみました。

というか、この記事で非常にわかりやすく解説されているので、もうあんまりやることがない(笑)



SVMのような古典的な手法なら、以前見つけたMLDemosというツールに実装されているので、これをいじって試してみる。



少し調べてみたら、SVMを実装したLIBSVMっていうメジャーなライブラリがあるみたい↓

LIBSVM — A Library for Support Vector Machines

LIBSVM

LIBSVMは、サポートベクトルの分類(C-SVC、NU-SVC)、回帰(イプシロン – SVR、NU-SVR)と分布推定(1クラスSVM)のための統合ソフトウェアで、マルチクラス分類をサポートしています。

ソースコードはGitHubにもある。色々な言語へのインターフェイスを用意しているみたいだけど、コアは読めなくもない量だ。
これ、javascriptでも動くのか。Wikipediaによると、Pythonの機械画集ライブラリscikit-learnもこのLIBSVMを利用しているらしい。

関連記事

ポリゴンジオメトリ処理ライブラリ『pmp-library (...

書籍『イラストで学ぶ ディープラーニング』

機械学習に役立つPythonライブラリ一覧

科学技術計算向けスクリプト言語『Julia』

データサイエンティストって何だ?

PyDataTokyo主催のDeep Learning勉強会

UnityのGameObjectの向きをScriptで制御す...

python-twitterで自分のお気に入りを取得する

UnityのMonoBehaviourクラスをシングルトン化...

Model View Controller

COLMAP:オープンソースのSfM・MVSツール

オーバーロードとオーバーライド

GoB:ZBrushとBlenderを連携させるアドオン

全脳アーキテクチャ勉強会

プログラミングスキルとは何か?

オープンソースの顔認識フレームワーク『OpenBR』

R-CNN (Regions with CNN featur...

OpenCV バージョン4がリリースされた!

NeuralNetwork.NET:.NETで使えるTens...

Mitsuba 3:オープンソースの研究向けレンダラ

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

自前のShaderがおかしい件

Open3D:3Dデータ処理ライブラリ

C++の抽象クラス

法線マップを用意してCanvas上でShadingするサンプ...

書籍『ゼロから作るDeep Learning』で自分なりに学...

OpenCV3.3.0でsfmモジュールのビルドに成功!

CGAN (Conditional GAN):条件付き敵対的...

機械学習について最近知った情報

Open Shading Language (OSL)

HD画質の無駄遣い その2

MFnDataとMFnAttribute

MPFB2:Blenderの人体モデリングアドオン

Unreal Engineの薄い本

Amazon Web ServicesでWordPress

Raspberry Piでセンサーの常時稼働を検討する

UnityでTweenアニメーションを実装できる3種類の無料...

Pythonのソースコードに特化した検索エンジン『Nulle...

網元AMIで作ったWordpressサイトのインスタンスをt...

機械学習で遊ぶ

Dlib:C++の機械学習ライブラリ

Mayaのプラグイン開発

コメント