Kornia:微分可能なコンピュータービジョンライブラリ

KorniaはバックエンドにPyTorchを使用したコンピュータービジョンライブラリで、古典的なコンピュータービジョンの処理を微分可能にして昨今のディープラーニングモデルに統合するためのPython向けライブラリ。

Kornia



Korniaは、PyTorch用の微分可能なコンピュータービジョンライブラリです。

Korniaは、コンピュータービジョンの一般的な問題を解決するための一連のルーチンと、微分可能なモジュールで構成されています。このパッケージのコアではメインのバックエンドとしてPyTorchを使用して効率性を高め、複雑な関数の勾配の定義・計算にReverse-Modeの自動微分を利用しています。




概要

このライブラリは既存のパッケージからインスピレーションを得ており、モデルの訓練時にニューラルネットワーク内に挿入できるオペレーター(画像変換、エピポーラ幾何学、深度推定、テンソル上で直接動作するフィルタ処理・エッジ検出などの低レベル画像処理)を備えたパッケージのサブセットで構成されています。

具体的には、Korniaは以下のコンポーネントで構成されるライブラリです。

コンポーネント
概要
kornia 強力なGPUサポートを備えた微分可能コンピュータービジョンライブラリ
kornia.augmentation GPUでdata augmentationモジュール
kornia.color 色空間を変換する一連のルーチン
kornia.contrib ユーザー貢献・実験的なオペレーターのコンパイル
kornia.enhance 正規化・強度変換モジュール
kornia.feature 特徴検出モジュール
kornia.filters 画像フィルタリング・エッジ検出モジュール
kornia.geometry 画像変換、3D線形代数、様々なカメラモデルを使用した変換などを行う
幾何学的コンピュータービジョンライブラリ
kornia.losses 様々なビジョンタスクを解決するための損失関数のスタック
kornia.morphology モルフォロジー演算モジュール
kornia.utils 画像からテンソルへのユーティリティとビジョン問題のための行列

ソースコードはGitHubにあるけど、pipで簡単にインストールできる。



https://arxiv.org/abs/1910.02190

関連記事

ディープラーニング

BGSLibrary:OpenCVベースの背景差分ライブラリ

ROMOハッカソンに行ってきた

Verilog HDL

LLM Visualization:大規模言語モデルの可視化

pythonの機械学習ライブラリ『scikit-learn』

ZBrushで作った3Dモデルを立体視で確認できるVRアプリ...

Unity MonoBehaviourクラスのオーバーライド...

Russian3DScannerのトポロジー転送ツール『Wr...

WordPress on Windows Azure

CNN Explainer:畳み込みニューラルネットワーク可...

UnityでShaderの入力パラメータとして行列を渡す

MythTV:Linuxでテレビの視聴・録画ができるオープン...

ROSでガンダムを動かす

Google Chromecast

ニューラルネットワークで画像分類

Quartus II

池袋パルコで3Dのバーチャルフィッティング『ウェアラブル ク...

adskShaderSDK

Adobeの手振れ補正機能『ワープスタビライザー』の秘密

畳み込みニューラルネットワーク (CNN: Convolut...

SSII2014 チュートリアル講演会の資料

html5のcanvasの可能性

AndroidもopenGLも初心者さ (でもJavaは知っ...

書籍『イラストで学ぶ ディープラーニング』

ブラウザ操作自動化ツール『Selenium』を試す

C++始めようと思うんだ

科学技術計算向けスクリプト言語『Julia』

データサイエンティストって何だ?

C#で使える遺伝的アルゴリズムライブラリ『GeneticSh...

OpenCVでPhotoshopのプラグイン開発

BlenderのPython環境にPyTorchをインストー...

Digital Emily Project:人間の顔をそっく...

仮想関数

OpenCV 3.3.0 contribのsfmモジュールの...

Google XML Sitemap Generatorプラ...

GoogleのDeep Learning論文

Unity Scriptコーディング→Unreal Engi...

ブログのデザイン変えました

DUSt3R:3Dコンピュータービジョンの基盤モデル

Facebookの顔認証技術『DeepFace』

ROSの薄い本

コメント