KorniaはバックエンドにPyTorchを使用したコンピュータービジョンライブラリで、古典的なコンピュータービジョンの処理を微分可能にして昨今のディープラーニングモデルに統合するためのPython向けライブラリ。
Kornia
Korniaは、PyTorch用の微分可能なコンピュータービジョンライブラリです。
Korniaは、コンピュータービジョンの一般的な問題を解決するための一連のルーチンと、微分可能なモジュールで構成されています。このパッケージのコアではメインのバックエンドとしてPyTorchを使用して効率性を高め、複雑な関数の勾配の定義・計算にReverse-Modeの自動微分を利用しています。
概要
このライブラリは既存のパッケージからインスピレーションを得ており、モデルの訓練時にニューラルネットワーク内に挿入できるオペレーター(画像変換、エピポーラ幾何学、深度推定、テンソル上で直接動作するフィルタ処理・エッジ検出などの低レベル画像処理)を備えたパッケージのサブセットで構成されています。
具体的には、Korniaは以下のコンポーネントで構成されるライブラリです。
コンポーネント kornia 強力なGPUサポートを備えた微分可能コンピュータービジョンライブラリ kornia.augmentation GPUでdata augmentationモジュール kornia.color 色空間を変換する一連のルーチン kornia.contrib ユーザー貢献・実験的なオペレーターのコンパイル kornia.enhance 正規化・強度変換モジュール kornia.feature 特徴検出モジュール kornia.filters 画像フィルタリング・エッジ検出モジュール kornia.geometry 画像変換、3D線形代数、様々なカメラモデルを使用した変換などを行う
幾何学的コンピュータービジョンライブラリkornia.losses 様々なビジョンタスクを解決するための損失関数のスタック kornia.morphology モルフォロジー演算モジュール kornia.utils 画像からテンソルへのユーティリティとビジョン問題のための行列
ソースコードはGitHubにあるけど、pipで簡単にインストールできる。
https://arxiv.org/abs/1910.02190
関連記事
Geogram：C++の3D幾何アルゴリズムライブラリ
Google Colaboratoryで遊ぶ準備
Google製オープンソース機械学習ライブラリ『Tensor...
BlenderProc：Blenderで機械学習用の画像デー...
WordPress on Windows Azure
手を動かしながら学ぶデータマイニング
Open3D：3Dデータ処理ライブラリ
データサイエンティストって何だ？
WordPressプラグインによるサイトマップの自動生成
Mayaのプラグイン開発
写真に3Dオブジェクトを違和感無く合成する『3DPhotoM...
OpenCVで平均顔を作るチュートリアル
Faceshiftで表情をキャプチャしてBlender上でM...
Boost オープンソースライブラリ
Point Cloud Consortiumのセミナー「3D...
JavaScriptとかWebGLとかCanvasとか
fSpy：1枚の写真からカメラパラメーターを割り出すツール
pythonの機械学習ライブラリ『scikit-learn』
CGレンダラ研究開発のためのフレームワーク『Lightmet...
AR (Augmented Reality)とDR (Dim...
疑似3D写真が撮れるiPhoneアプリ『Seene』がアップ...
MB-Lab：Blenderの人体モデリングアドオン
UnityのAR FoundationでARKit 3
Googleが画像解析旅行ガイドアプリのJetpac社を買収
PythonでMayaのShapeノードプラグインを作る
Paul Debevec
Kubric：機械学習用アノテーション付き動画生成パイプライ...
OpenCV
Windows10でPyTorchをインストールしてVSCo...
NeuralNetwork.NET：.NETで使えるTens...
プログラミングスキルとは何か？
PyMC：Pythonのベイズ統計ライブラリ
OpenAR：OpenCVベースのマーカーARライブラリ
Live CV：インタラクティブにComputer Visi...
hloc：SuperGlueで精度を向上させたSfM・Vis...
UnityのTransformクラスについて調べてみた
IronPythonを使ってUnity上でPythonのコー...
Mitsuba 3：オープンソースの研究向けレンダラ
OpenCVのバージョン3が正式リリースされたぞ
ZBrushで作った3Dモデルを立体視で確認できるVRアプリ...
3Dモデルを立体視で確認できるVRアプリを作っている
Quartus II
コメント