SVM (Support Vector Machine)

久しぶりの機械学習ネタ。

Deep Learningが何かと話題の昨今ですが、実用方面ではSVMやRandom Forestなどの古典的な手法が活躍しているらしい。
それなら、古典を学べば身近なところですぐに応用ができるのではないかと思い始めた。リッチな処理じゃなくて、すごく質素な単純作業か何かが自動化できたら面白いなぁ、と。(機械学習の古典的手法というとむしろニューラルネットワークの方らしいけど)

Random Forestについては前に勉強したからそれなりに理解しているので、今回はSVMについて理解を深めておこうと思う。



この記事に触発されたというのもあります。↓

C++によるSMOを用いたSVMの実装

機械学習の手法にはいろいろありますが、その中でもサポートベクトルマシン(SVM; support vector machine)は高い精度で知られる有名な手法です。
以前C++で多層パーセプトロンを実装したので、今度はSVMをC++で実装してみました。

というか、この記事で非常にわかりやすく解説されているので、もうあんまりやることがない(笑)



SVMのような古典的な手法なら、以前見つけたMLDemosというツールに実装されているので、これをいじって試してみる。



少し調べてみたら、SVMを実装したLIBSVMっていうメジャーなライブラリがあるみたい↓

LIBSVM — A Library for Support Vector Machines

LIBSVM

LIBSVMは、サポートベクトルの分類(C-SVC、NU-SVC)、回帰(イプシロン – SVR、NU-SVR)と分布推定(1クラスSVM)のための統合ソフトウェアで、マルチクラス分類をサポートしています。

ソースコードはGitHubにもある。色々な言語へのインターフェイスを用意しているみたいだけど、コアは読めなくもない量だ。
これ、javascriptでも動くのか。Wikipediaによると、Pythonの機械画集ライブラリscikit-learnもこのLIBSVMを利用しているらしい。

関連記事

viser:Pythonで使える3D可視化ライブラリ

cvui:OpenCVのための軽量GUIライブラリ

3Dグラフィックスの入門書

OpenCVで平均顔を作るチュートリアル

hloc:SuperGlueで精度を向上させたSfM・Visual Localization

クラスの基本

iOSデバイスのためのフィジカル・コンピューティングツールキット『konashi(こなし)』

Unity ARKitプラグインサンプルのチュートリアルを読む

python-twitterで自分のお気に入りを取得する

Human Generator:Blenderの人体生成アドオン

Quartus II

MythTV:Linuxでテレビの視聴・録画ができるオープンソースプロジェクト

マンガで分かる JavaScriptプログラミング講座

Google Colaboratoryで遊ぶ準備

画像生成AI Stable Diffusionで遊ぶ

Model View Controller

3D復元技術の情報リンク集

OANDAのfxTrade API

AfterEffectsプラグイン開発

WordPressのサーバ引っ越し方法を考える

OpenCVの超解像(SuperResolution)モジュールを試す

ブログの復旧が難航してた話

OpenSfM:PythonのStructure from Motionライブラリ

VCG Library:C++のポリゴン操作ライブラリ

Mayaのシェーディングノードの区分

機械学習について最近知った情報

BlenderProc:Blenderで機械学習用の画像データを生成するPythonツール

BlenderでPhotogrammetryできるアドオン

Caffe:読みやすくて高速なディープラーニングのフレームワーク

CycleGAN:ドメイン関係を学習した画像変換

WordPress on Google App Engineを1週間運用してみて

PyTorch3D:3Dコンピュータービジョンライブラリ

C++ 標準テンプレートライブラリ (STL)

Unityで画面タッチ・ジェスチャ入力を扱う無料Asset『TouchScript』

為替レートの読み方 2WAYプライス表示

CGのためのディープラーニング

clearcoat Shader

データサイエンティストって何だ?

Google XML Sitemap Generatorプラグインを3.4.1へダウングレード

OpenGVのライブラリ構成

PyDataTokyo主催のDeep Learning勉強会

BlenderのPython環境にPyTorchをインストールする

コメント