画像認識による位置情報取得 – Semi-Direct Monocular Visual Odometry (SVO)

今日たまたまTwitterのTLで見かけたやつ。
単眼のカメラ映像からリアルタイムに位置情報を取得している。

論文はこちら
そして、GitHubにROSで動作するソースコードが公開されている。
http://paropon.hatenablog.com/entry/2015/01/17/221305

論文を読んだ人のツイート。↓

さっきTLに流れてきたSVO論文読了。前フレームとの視差で初期位置推定、キーフレームとの視差で更に高精度位置推定、最後に局所的にBAするスレッドと、3D点をベイズ推定する的なスレッドから構成される感じかな。てか、割と良くやるアプローチのような気もする。

— kf (@peisuke) 2014, 6月 18

SVOが使っているのはSophus（Eigenベースの回転群実装）ですが，PTAMはTooNを使っています．回転群以外にも色々あります． http://t.co/871zhcqyl4

— Toru Tamaki (@ttttamaki) 2014, 6月 20

世の中スゲェ人だらけだなぁ。

機械学習手法『Random Forest』

OpenCV 3.3.0 contribのsfmモジュールのサンプルを動かしてみる

3D Gaussian Splatting：リアルタイム描画できるRadiance Fields

ROSの薄い本

続・ディープラーニングの資料

GoogleのDeep Learning論文

携帯電話ロボット『RoBoHoN(ロボホン)』

OpenCV3.3.0でsfmモジュールのビルドに成功！

OpenCVでカメラ画像から自己位置認識 (Visual Odometry)

Dlib：C++の機械学習ライブラリ

CNN Explainer：畳み込みニューラルネットワーク可視化ツール

Structure from Motion (多視点画像からの3次元形状復元)

Leap MotionでMaya上のオブジェクトを操作できるプラグイン

UnityからROSを利用できる『ROS#』

オープンソースの顔の動作解析ツールキット『OpenFace』

池袋パルコで3Dのバーチャルフィッティング『ウェアラブルクロージングバイアーバンリサーチ』

Multi-View Environment：複数画像から3次元形状を再構築するライブラリ

OpenGVの用語

PCA (主成分分析)

Rerun：マルチモーダルデータの可視化アプリとSDK

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

Adobeの手振れ補正機能『ワープスタビライザー』の秘密

CycleGAN：ドメイン関係を学習した画像変換

Runway ML：クリエイターのための機械学習ツール

書籍『ゼロから作るDeep Learning』で自分なりに学ぶ

統計的な顔モデル

CGAN (Conditional GAN)：条件付き敵対的生成ネットワーク

OpenCV 3.1のsfmモジュールを試す

Alice Vision：オープンソースのPhotogrammetryフレームワーク

顔追跡による擬似3D表示『Dynamic Perspective』

OpenCVで顔のモーフィングを実装する

UnityでPoint Cloudを表示する方法

Point Cloud Libraryに動画フォーマットが追加されるらしい

Live CV：インタラクティブにComputer Visionコーディングができるツール

PGGAN：段階的に解像度を上げて学習を進めるGAN

GAN (Generative Adversarial Networks)：敵対的生成ネットワーク

OpenCVの三角測量関数『cv::triangulatepoints』

OpenGV：画像からカメラの3次元位置・姿勢を推定するライブラリ

OpenMVSのサンプルを動かしてみる

OpenCV 3.3.0-RCでsfmモジュールをビルド

Cartographer：オープンソースのSLAMライブラリ

第1回 3D勉強会＠関東『SLAMチュートリアル大会』

関連記事

機械学習手法『Random Forest』

OpenCV 3.3.0 contribのsfmモジュールのサンプルを動かしてみる

3D Gaussian Splatting：リアルタイム描画できるRadiance Fields

ROSの薄い本

続・ディープラーニングの資料

GoogleのDeep Learning論文

携帯電話ロボット『RoBoHoN(ロボホン)』

OpenCV3.3.0でsfmモジュールのビルドに成功！

OpenCVでカメラ画像から自己位置認識 (Visual Odometry)

Dlib：C++の機械学習ライブラリ

CNN Explainer：畳み込みニューラルネットワーク可視化ツール

Structure from Motion (多視点画像からの3次元形状復元)

Leap MotionでMaya上のオブジェクトを操作できるプラグイン

UnityからROSを利用できる『ROS#』

オープンソースの顔の動作解析ツールキット『OpenFace』

池袋パルコで3Dのバーチャルフィッティング『ウェアラブル クロージング バイ アーバンリサーチ』

Multi-View Environment：複数画像から3次元形状を再構築するライブラリ

OpenGVの用語

PCA (主成分分析)

Rerun：マルチモーダルデータの可視化アプリとSDK

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

Adobeの手振れ補正機能『ワープスタビライザー』の秘密

CycleGAN：ドメイン関係を学習した画像変換

Runway ML：クリエイターのための機械学習ツール

書籍『ゼロから作るDeep Learning』で自分なりに学ぶ

統計的な顔モデル

CGAN (Conditional GAN)：条件付き敵対的生成ネットワーク

OpenCV 3.1のsfmモジュールを試す

Alice Vision：オープンソースのPhotogrammetryフレームワーク

顔追跡による擬似3D表示『Dynamic Perspective』

OpenCVで顔のモーフィングを実装する

UnityでPoint Cloudを表示する方法

Point Cloud Libraryに動画フォーマットが追加されるらしい

Live CV：インタラクティブにComputer Visionコーディングができるツール

PGGAN：段階的に解像度を上げて学習を進めるGAN

GAN (Generative Adversarial Networks)：敵対的生成ネットワーク

OpenCVの三角測量関数『cv::triangulatepoints』

OpenGV：画像からカメラの3次元位置・姿勢を推定するライブラリ

OpenMVSのサンプルを動かしてみる

﻿OpenCV 3.3.0-RCでsfmモジュールをビルド

Cartographer：オープンソースのSLAMライブラリ

第1回 3D勉強会＠関東『SLAMチュートリアル大会』

コメント

個人情報に関するお知らせ

池袋パルコで3Dのバーチャルフィッティング『ウェアラブルクロージングバイアーバンリサーチ』

OpenCV 3.3.0-RCでsfmモジュールをビルド