KorniaはバックエンドにPyTorchを使用したコンピュータービジョンライブラリで、古典的なコンピュータービジョンの処理を微分可能にして昨今のディープラーニングモデルに統合するためのPython向けライブラリ。
Kornia
Korniaは、PyTorch用の微分可能なコンピュータービジョンライブラリです。
Korniaは、コンピュータービジョンの一般的な問題を解決するための一連のルーチンと、微分可能なモジュールで構成されています。このパッケージのコアではメインのバックエンドとしてPyTorchを使用して効率性を高め、複雑な関数の勾配の定義・計算にReverse-Modeの自動微分を利用しています。
概要
このライブラリは既存のパッケージからインスピレーションを得ており、モデルの訓練時にニューラルネットワーク内に挿入できるオペレーター(画像変換、エピポーラ幾何学、深度推定、テンソル上で直接動作するフィルタ処理・エッジ検出などの低レベル画像処理)を備えたパッケージのサブセットで構成されています。
具体的には、Korniaは以下のコンポーネントで構成されるライブラリです。
コンポーネント kornia 強力なGPUサポートを備えた微分可能コンピュータービジョンライブラリ kornia.augmentation GPUでdata augmentationモジュール kornia.color 色空間を変換する一連のルーチン kornia.contrib ユーザー貢献・実験的なオペレーターのコンパイル kornia.enhance 正規化・強度変換モジュール kornia.feature 特徴検出モジュール kornia.filters 画像フィルタリング・エッジ検出モジュール kornia.geometry 画像変換、3D線形代数、様々なカメラモデルを使用した変換などを行う
幾何学的コンピュータービジョンライブラリkornia.losses 様々なビジョンタスクを解決するための損失関数のスタック kornia.morphology モルフォロジー演算モジュール kornia.utils 画像からテンソルへのユーティリティとビジョン問題のための行列
ソースコードはGitHubにあるけど、pipで簡単にインストールできる。
https://arxiv.org/abs/1910.02190
関連記事
OpenCVで平均顔を作るチュートリアル
Unityで学ぶC#
Houdiniのライセンスの種類
Unreal Engineの薄い本
DCGAN (Deep Convolutional GAN)...
スクラッチで既存のキャラクターを立体化したい
Google Chromecast
CGAN (Conditional GAN)：条件付き敵対的...
続・ディープラーニングの資料
Google App Engine上のWordPressでF...
PyMC：Pythonのベイズ統計ライブラリ
hloc：SuperGlueで精度を向上させたSfM・Vis...
オープンソースの顔認識フレームワーク『OpenBR』
ドットインストールのWordPress入門レッスン
Googleが画像解析旅行ガイドアプリのJetpac社を買収
Adobeの手振れ補正機能『ワープスタビライザー』の秘密
OpenCV3.3.0でsfmモジュールのビルドに成功！
クラスの基本
OpenCV 3.3.0-RCでsfmモジュールをビルド
網元AMIで作ったWordpressサイトのインスタンスをt...
FreeMoCap Project：オープンソースのマーカー...
ZBrushで作った3Dモデルを立体視で確認できるVRアプリ...
JavaScriptとかWebGLとかCanvasとか
Python.NET：Pythonと.NETを連携させるパッ...
PyTorch3D：3Dコンピュータービジョンライブラリ
Raspberry Piでセンサーの常時稼働を検討する
Zibra Liquids：Unity向け流体シミュレーショ...
頭蓋骨からの顔復元と進化過程の可視化
OpenCV
Google Colaboratoryで遊ぶ準備
OANDAのfxTrade API
FacebookがDeep learningツールの一部をオ...
Raspberry PiのGPIOを操作するPythonライ...
科学技術計算向けスクリプト言語『Julia』
Mechanizeで要認証Webサイトをスクレイピング
VGGT：マルチビュー・フィードフォワード型3Dビジョン基盤...
GoogleのDeep Learning論文
疑似3D写真が撮れるiPhoneアプリ『Seene』がアップ...
海外ドラマのChromaKey
UnityでLight Shaftを表現する
Faceshiftで表情をキャプチャしてBlender上でM...
UnityでShaderの入力パラメータとして行列を渡す
コメント