KorniaはバックエンドにPyTorchを使用したコンピュータービジョンライブラリで、古典的なコンピュータービジョンの処理を微分可能にして昨今のディープラーニングモデルに統合するためのPython向けライブラリ。
Kornia
Korniaは、PyTorch用の微分可能なコンピュータービジョンライブラリです。
Korniaは、コンピュータービジョンの一般的な問題を解決するための一連のルーチンと、微分可能なモジュールで構成されています。このパッケージのコアではメインのバックエンドとしてPyTorchを使用して効率性を高め、複雑な関数の勾配の定義・計算にReverse-Modeの自動微分を利用しています。
概要
このライブラリは既存のパッケージからインスピレーションを得ており、モデルの訓練時にニューラルネットワーク内に挿入できるオペレーター(画像変換、エピポーラ幾何学、深度推定、テンソル上で直接動作するフィルタ処理・エッジ検出などの低レベル画像処理)を備えたパッケージのサブセットで構成されています。
具体的には、Korniaは以下のコンポーネントで構成されるライブラリです。
コンポーネント kornia 強力なGPUサポートを備えた微分可能コンピュータービジョンライブラリ kornia.augmentation GPUでdata augmentationモジュール kornia.color 色空間を変換する一連のルーチン kornia.contrib ユーザー貢献・実験的なオペレーターのコンパイル kornia.enhance 正規化・強度変換モジュール kornia.feature 特徴検出モジュール kornia.filters 画像フィルタリング・エッジ検出モジュール kornia.geometry 画像変換、3D線形代数、様々なカメラモデルを使用した変換などを行う
幾何学的コンピュータービジョンライブラリkornia.losses 様々なビジョンタスクを解決するための損失関数のスタック kornia.morphology モルフォロジー演算モジュール kornia.utils 画像からテンソルへのユーティリティとビジョン問題のための行列
ソースコードはGitHubにあるけど、pipで簡単にインストールできる。
https://arxiv.org/abs/1910.02190
関連記事
DCGAN (Deep Convolutional GAN)...
ROSでガンダムを動かす
OpenCV 3.3.0-RCでsfmモジュールをビルド
「ベンジャミン·バトン数奇な人生」でどうやってCGの顔を作っ...
Javaで作られたオープンソースの3DCGレンダラ『Sunf...
OpenCV
Theia：オープンソースのStructure from M...
PythonのHTML・XMLパーサー『BeautifulS...
為替レートの読み方 2WAYプライス表示
書籍『ROSプログラミング』
AfterEffectsプラグイン開発
PCA (主成分分析)
3D Gaussian Splatting：リアルタイム描画...
GoogleのDeep Learning論文
BlenderのPython環境にPyTorchをインストー...
CycleGAN：ドメイン関係を学習した画像変換
AR (Augmented Reality)とDR (Dim...
Raspberry Pi
PythonでBlenderのAdd-on開発
Google App Engineのデプロイ失敗
Paul Debevec
3Dモデルを立体視で確認できるVRアプリを作っている
FreeMoCap Project：オープンソースのマーカー...
ブログの復旧が難航してた話
Webスクレイピングの勉強会に行ってきた
RefineNet (Multi-Path Refineme...
CNN Explainer：畳み込みニューラルネットワーク可...
OpenCVで平均顔を作るチュートリアル
コンピュータビジョンの技術マップ
ニューラルネットワークで画像分類
Faceshiftで表情をキャプチャしてBlender上でM...
OpenCV 3.1のsfmモジュールのビルド再び
Point Cloud Libraryに動画フォーマットが追...
Python2とPython3
pythonの機械学習ライブラリ『scikit-learn』
Kaolin：3Dディープラーニング用のPyTorchライブ...
HerokuでMEAN stack
Amazon Web ServicesでWordPress
UnityからROSを利用できる『ROS#』
オープンソースの人体モデリングツール『MakeHuman』の...
オープンソースの物理ベースレンダラ『Mitsuba』をMay...
Boost オープンソースライブラリ
コメント