KorniaはバックエンドにPyTorchを使用したコンピュータービジョンライブラリで、古典的なコンピュータービジョンの処理を微分可能にして昨今のディープラーニングモデルに統合するためのPython向けライブラリ。
Kornia
Korniaは、PyTorch用の微分可能なコンピュータービジョンライブラリです。
Korniaは、コンピュータービジョンの一般的な問題を解決するための一連のルーチンと、微分可能なモジュールで構成されています。このパッケージのコアではメインのバックエンドとしてPyTorchを使用して効率性を高め、複雑な関数の勾配の定義・計算にReverse-Modeの自動微分を利用しています。
概要
このライブラリは既存のパッケージからインスピレーションを得ており、モデルの訓練時にニューラルネットワーク内に挿入できるオペレーター(画像変換、エピポーラ幾何学、深度推定、テンソル上で直接動作するフィルタ処理・エッジ検出などの低レベル画像処理)を備えたパッケージのサブセットで構成されています。
具体的には、Korniaは以下のコンポーネントで構成されるライブラリです。
コンポーネント kornia 強力なGPUサポートを備えた微分可能コンピュータービジョンライブラリ kornia.augmentation GPUでdata augmentationモジュール kornia.color 色空間を変換する一連のルーチン kornia.contrib ユーザー貢献・実験的なオペレーターのコンパイル kornia.enhance 正規化・強度変換モジュール kornia.feature 特徴検出モジュール kornia.filters 画像フィルタリング・エッジ検出モジュール kornia.geometry 画像変換、3D線形代数、様々なカメラモデルを使用した変換などを行う
幾何学的コンピュータービジョンライブラリkornia.losses 様々なビジョンタスクを解決するための損失関数のスタック kornia.morphology モルフォロジー演算モジュール kornia.utils 画像からテンソルへのユーティリティとビジョン問題のための行列
ソースコードはGitHubにあるけど、pipで簡単にインストールできる。
https://arxiv.org/abs/1910.02190
関連記事
C++の抽象クラス
BGSLibrary：OpenCVベースの背景差分ライブラリ
動的なメモリの扱い
Raspberry Pi 2のGPIOピン配置
COLMAP：オープンソースのSfM・MVSツール
3D Gaussian Splatting：リアルタイム描画...
UnrealCV：コンピュータビジョン研究のためのUnrea...
Photogrammetry (写真測量法)
頭蓋骨からの顔復元と進化過程の可視化
Qlone：スマホのカメラで3Dスキャンできるアプリ
Google App Engine上のWordPressでA...
iOSデバイスと接続して連携するガジェットの開発方法
Point Cloud Libraryに動画フォーマットが追...
OpenCVのfindEssentialMat関数を使ったサ...
Alice Vision：オープンソースのPhotogram...
Faster R-CNN：ディープラーニングによる一般物体検...
NumSharp：C#で使えるNumPyライクな数値計算ライ...
ベイズ推定とグラフィカルモデル
今年もSSII
MPFB2：Blenderの人体モデリングアドオン
顔画像処理技術の過去の研究
オープンソースのプリント基板設計ツール『KiCad』
UnityでPoint Cloudを表示する方法
pythonの機械学習ライブラリ『scikit-learn』
第25回コンピュータビジョン勉強会＠関東に行って来た
iPhoneアプリ開発 Xcode 5のお作法
3Dモデルを立体視で確認できるVRアプリを作っている
ZBrushのZScript入門
WordPress on Google App Engine...
1枚の画像からマテリアルを作成できる無料ツール『Materi...
機械学習手法『Random Forest』
Google Colaboratoryで遊ぶ準備
UnityのMonoBehaviourクラスをシングルトン化...
Autodesk Mementoでゴジラを3次元復元する
OpenGV：画像からカメラの3次元位置・姿勢を推定するライ...
PythonでMayaのShapeノードプラグインを作る
オープンソースの顔の動作解析ツールキット『OpenFace』
Unity ARKitプラグインサンプルのチュートリアルを読...
OpenCV 3.1から追加されたSfMモジュール
BlenderのPython環境にPyTorchをインストー...
OpenMVS：Multi-View Stereoによる3次...
3Dグラフィックスの入門書
コメント