Kornia:微分可能なコンピュータービジョンライブラリ

KorniaはバックエンドにPyTorchを使用したコンピュータービジョンライブラリで、古典的なコンピュータービジョンの処理を微分可能にして昨今のディープラーニングモデルに統合するためのPython向けライブラリ。

Kornia



Korniaは、PyTorch用の微分可能なコンピュータービジョンライブラリです。

Korniaは、コンピュータービジョンの一般的な問題を解決するための一連のルーチンと、微分可能なモジュールで構成されています。このパッケージのコアではメインのバックエンドとしてPyTorchを使用して効率性を高め、複雑な関数の勾配の定義・計算にReverse-Modeの自動微分を利用しています。




概要

このライブラリは既存のパッケージからインスピレーションを得ており、モデルの訓練時にニューラルネットワーク内に挿入できるオペレーター(画像変換、エピポーラ幾何学、深度推定、テンソル上で直接動作するフィルタ処理・エッジ検出などの低レベル画像処理)を備えたパッケージのサブセットで構成されています。

具体的には、Korniaは以下のコンポーネントで構成されるライブラリです。

コンポーネント
概要
kornia 強力なGPUサポートを備えた微分可能コンピュータービジョンライブラリ
kornia.augmentation GPUでdata augmentationモジュール
kornia.color 色空間を変換する一連のルーチン
kornia.contrib ユーザー貢献・実験的なオペレーターのコンパイル
kornia.enhance 正規化・強度変換モジュール
kornia.feature 特徴検出モジュール
kornia.filters 画像フィルタリング・エッジ検出モジュール
kornia.geometry 画像変換、3D線形代数、様々なカメラモデルを使用した変換などを行う
幾何学的コンピュータービジョンライブラリ
kornia.losses 様々なビジョンタスクを解決するための損失関数のスタック
kornia.morphology モルフォロジー演算モジュール
kornia.utils 画像からテンソルへのユーティリティとビジョン問題のための行列

ソースコードはGitHubにあるけど、pipで簡単にインストールできる。



https://arxiv.org/abs/1910.02190

関連記事

株式会社ヘキサドライブの研究室ページ

UnrealCLR:Unreal Engineで.NET Coreを利用できるプラグイン

Unityの各コンポーネント間でのやり取り

OpenCVのバージョン3が正式リリースされたぞ

Deep Fluids:流体シミュレーションをディープラーニングで近似する

第25回コンピュータビジョン勉強会@関東に行って来た

konashiのサンプルコードを動かしてみた

BGSLibrary:OpenCVベースの背景差分ライブラリ

Unityで画面タッチ・ジェスチャ入力を扱う無料Asset『TouchScript』

Open Shading Language (OSL)

Google App Engine上のWordPressでFlickrの画像を貼る

OANDAのfxTrade API

オープンソースの人体モデリングツール『MakeHuman』のAPI開発プロジェクトがスタート

Regard3D:オープンソースのStructure from Motionツール

SSII2014 チュートリアル講演会の資料

python-twitterで自分のお気に入りを取得する

プログラミングスキルとは何か?

Kubric:機械学習用アノテーション付き動画生成パイプライン

Google Chromecast

Google製オープンソース機械学習ライブラリ『TensorFlow』のWindows版が公開された

MVStudio:オープンソースのPhotogrammetryツール

BlenderのPython環境にPyTorchをインストールする

KelpNet:C#で使える可読性重視のディープラーニングライブラリ

Runway ML:クリエイターのための機械学習ツール

書籍『OpenCV 3 プログラミングブック』を購入

Web経由でRaspberry PiのGPIOを操作したい

iPhoneで3D写真が撮れるアプリ『seene』

Adobe MAX 2015

CGのためのディープラーニング

統計的な顔モデル

Open3D:3Dデータ処理ライブラリ

Photogrammetry (写真測量法)

3D復元技術の情報リンク集

写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

uvでWindows11のPython環境を管理する

画像認識による位置情報取得 - Semi-Direct Monocular Visual Odome...

Unreal Engineの薄い本

AMIMOTO(PVM版)で作成したインスタンスをAMIMOTO (HVM版)へ移行する

OpenCV 3.1のsfmモジュールを試す

OpenGVの用語

OpenVDB:3Dボリュームデータ処理ライブラリ

OpenCV3.3.0でsfmモジュールのビルドに成功!

コメント