Kornia:微分可能なコンピュータービジョンライブラリ

KorniaはバックエンドにPyTorchを使用したコンピュータービジョンライブラリで、古典的なコンピュータービジョンの処理を微分可能にして昨今のディープラーニングモデルに統合するためのPython向けライブラリ。

Kornia



Korniaは、PyTorch用の微分可能なコンピュータービジョンライブラリです。

Korniaは、コンピュータービジョンの一般的な問題を解決するための一連のルーチンと、微分可能なモジュールで構成されています。このパッケージのコアではメインのバックエンドとしてPyTorchを使用して効率性を高め、複雑な関数の勾配の定義・計算にReverse-Modeの自動微分を利用しています。




概要

このライブラリは既存のパッケージからインスピレーションを得ており、モデルの訓練時にニューラルネットワーク内に挿入できるオペレーター(画像変換、エピポーラ幾何学、深度推定、テンソル上で直接動作するフィルタ処理・エッジ検出などの低レベル画像処理)を備えたパッケージのサブセットで構成されています。

具体的には、Korniaは以下のコンポーネントで構成されるライブラリです。

コンポーネント
概要
kornia 強力なGPUサポートを備えた微分可能コンピュータービジョンライブラリ
kornia.augmentation GPUでdata augmentationモジュール
kornia.color 色空間を変換する一連のルーチン
kornia.contrib ユーザー貢献・実験的なオペレーターのコンパイル
kornia.enhance 正規化・強度変換モジュール
kornia.feature 特徴検出モジュール
kornia.filters 画像フィルタリング・エッジ検出モジュール
kornia.geometry 画像変換、3D線形代数、様々なカメラモデルを使用した変換などを行う
幾何学的コンピュータービジョンライブラリ
kornia.losses 様々なビジョンタスクを解決するための損失関数のスタック
kornia.morphology モルフォロジー演算モジュール
kornia.utils 画像からテンソルへのユーティリティとビジョン問題のための行列

ソースコードはGitHubにあるけど、pipで簡単にインストールできる。



https://arxiv.org/abs/1910.02190

関連記事

Javaで作られたオープンソースの3DCGレンダラ『Sunf...

Python拡張モジュールのWindows用インストーラー配...

Unity ARKitプラグインサンプルのドキュメントを読む

AMIMOTO(PVM版)で作成したインスタンスをAMIMO...

OpenCVのバージョン3が正式リリースされたぞ

Alice Vision:オープンソースのPhotogram...

YOLO (You Only Look Once):ディープ...

書籍『ROSプログラミング』

Deep Learningとその他の機械学習手法の性能比較

Iterator

MB-Lab:Blenderの人体モデリングアドオン

SONYの自律型エンタテインメントロボット『aibo』

BlenderのPython環境にPyTorchをインストー...

Verilog HDL

書籍『イラストで学ぶ ディープラーニング』

iPhone x ロボットハッカソン~RomoのiPhone...

法線マップを用意してCanvas上でShadingするサンプ...

Faceshiftで表情をキャプチャしてBlender上でM...

ZBrushのZScript入門

Pix2Pix:CGANによる画像変換

OpenCVの超解像(SuperResolution)モジュ...

Boost オープンソースライブラリ

マルコフ連鎖モンテカルロ法

TensorFlowでCGを微分できる『TensorFlow...

ManuelBastioniLAB:人体モデリングできるBl...

オープンソースのロボットアプリケーションフレームワーク『RO...

機械学習について最近知った情報

Rerun:マルチモーダルデータの可視化アプリとSDK

OpenAR:OpenCVベースのマーカーARライブラリ

オープンソースの顔認識フレームワーク『OpenBR』

RefineNet (Multi-Path Refineme...

データサイエンティストって何だ?

OpenCVで顔のモーフィングを実装する

Unity MonoBehaviourクラスのオーバーライド...

Kaolin:3Dディープラーニング用のPyTorchライブ...

Adobe MAX 2015

OpenCV バージョン4がリリースされた!

Mitsuba 3:オープンソースの研究向けレンダラ

python-twitterで自分のお気に入りを取得する

Unityの薄い本

PeopleSansPeople:機械学習用の人物データをU...

OpenCVの顔検出過程を可視化した動画

コメント