SVM (Support Vector Machine)

久しぶりの機械学習ネタ。

Deep Learningが何かと話題の昨今ですが、実用方面ではSVMやRandom Forestなどの古典的な手法が活躍しているらしい。
それなら、古典を学べば身近なところですぐに応用ができるのではないかと思い始めた。リッチな処理じゃなくて、すごく質素な単純作業か何かが自動化できたら面白いなぁ、と。(機械学習の古典的手法というとむしろニューラルネットワークの方らしいけど)

Random Forestについては前に勉強したからそれなりに理解しているので、今回はSVMについて理解を深めておこうと思う。



この記事に触発されたというのもあります。↓

C++によるSMOを用いたSVMの実装

機械学習の手法にはいろいろありますが、その中でもサポートベクトルマシン(SVM; support vector machine)は高い精度で知られる有名な手法です。
以前C++で多層パーセプトロンを実装したので、今度はSVMをC++で実装してみました。

というか、この記事で非常にわかりやすく解説されているので、もうあんまりやることがない(笑)



SVMのような古典的な手法なら、以前見つけたMLDemosというツールに実装されているので、これをいじって試してみる。



少し調べてみたら、SVMを実装したLIBSVMっていうメジャーなライブラリがあるみたい↓

LIBSVM — A Library for Support Vector Machines

LIBSVM

LIBSVMは、サポートベクトルの分類(C-SVC、NU-SVC)、回帰(イプシロン – SVR、NU-SVR)と分布推定(1クラスSVM)のための統合ソフトウェアで、マルチクラス分類をサポートしています。

ソースコードはGitHubにもある。色々な言語へのインターフェイスを用意しているみたいだけど、コアは読めなくもない量だ。
これ、javascriptでも動くのか。Wikipediaによると、Pythonの機械画集ライブラリscikit-learnもこのLIBSVMを利用しているらしい。

関連記事

NumSharp:C#で使えるNumPyライクな数値計算ライ...

LuxCoreRender:オープンソースの物理ベースレンダ...

Manim:Pythonで使える数学アニメーションライブラリ

3DCG Meetup #4に行ってきた

Gource:バージョン管理の履歴を可視化するツール

iPhoneアプリ開発 Xcode 5のお作法

画像生成AI Stable Diffusionで遊ぶ

Windows10でPyTorchをインストールしてVSCo...

pythonの機械学習ライブラリ『scikit-learn』

参考書

LLM Visualization:大規模言語モデルの可視化

仮想関数

KelpNet:C#で使える可読性重視のディープラーニングラ...

今年もSSII

Konashiを買った

MythTV:Linuxでテレビの視聴・録画ができるオープン...

CGレンダラ研究開発のためのフレームワーク『Lightmet...

ManimML:機械学習の概念を視覚的に説明するためのライブ...

C++始めようと思うんだ

adskShaderSDK

Transformer Explainer:テキスト生成モデ...

OpenCVで顔のランドマークを検出する『Facemark ...

チャットツール用bot開発フレームワーク『Hubot』

OpenCVで平均顔を作るチュートリアル

3D復元技術の情報リンク集

Kaolin:3Dディープラーニング用のPyTorchライブ...

ブログのデザイン変えました

オーバーロードとオーバーライド

UnityでARKit2.0

書籍『OpenCV 3 プログラミングブック』を購入

オープンソースの顔の動作解析ツールキット『OpenFace』

SONYの自律型エンタテインメントロボット『aibo』

FacebookがDeep learningツールの一部をオ...

iPhone x ロボットハッカソン~RomoのiPhone...

ROSでガンダムを動かす

Open Shading Language (OSL)

Dlib:C++の機械学習ライブラリ

Quartus II

Pythonのソースコードに特化した検索エンジン『Nulle...

Mechanizeで要認証Webサイトをスクレイピング

OpenCV 3.1とopencv_contribモジュール...

OpenCVの三角測量関数『cv::triangulatep...

コメント