openMVGをWindows10 Visual Studio 2015環境でビルドする

Windows環境でOpenCVのsfmモジュールをビルドするのはえらい面倒だったので、変にOpenCVにこだわるのはやめようと思う。



以前見つけたopenMVGをビルドしてみる。
複数視点画像から3次元形状を復元するライブラリ『openMVG』
最近、この手の2D→3D復元系のライブラリを色々と調べている。何となく、自分で3D復元ツールを作ってみたくてね。この間のOpenGVは複数画像からカメラ(視点)の3次元位置・姿勢を推定するライブラリだった。↓こっちのopenMVG...


openMVGの公式ドキュメントによると、openMVGは他の依存ライブラリを別途ビルドする必要がなく、openMVGのリポジトリ一式だけでビルドできるようだ。(cereal, glfw, osi_clpdependenciesディレクトリに入れておく必要がありますが)

openMVG documentation!

依存関係

openMVGはスタンドアローンのディストリビューションです。使用するにあたって、追加で依存ライブラリ群をインストールする必要はありません。Linux環境では、ローカルのpng, zlib, jpegライブラリを利用することもできます。

オプションで外部のライブラリとリンクしたビルドもできるようだけど、まずはopenMVG単体でビルドして遊んでみることにする。(ちょっと欲を出して自前でOpenCVやら何やらも含めてビルドしようとしたらエラー地獄にはまったのは内緒)

CMake GUIで基本的にデフォルト設定のままで、唯一、サンプルもビルドするように追加で指定してからGenerateですんなりVisual Studio 2015でビルドできた。


スポンサーリンク


まずはサンプルを動かしながら勉強していく。公式ドキュメントのサンプル解説ページを自分用にざっと翻訳。↓

openMVG samples

openMVGは特徴量のチェックの実装に強くフォーカスしています。そのため、主要な特徴量を利用するサンプルとして(コードの使い方を知る手助けとなるような)ユニットテストを提供しています。

サンプルはショーケースやチュートリアルとしてご覧いただけます:

imageData

以下の実装例で使うのための画像ファイル。

features_siftPutativeMatches

このサンプルの内容:

  • SIFT特徴と記述の抽出
  • 特徴のマッチング
  • マッチング結果の表示

features_affine_demo

このサンプルの内容:

  • MSER/MSCR特徴量による領域検出
  • 領域にフィッティングした楕円の表示

features_image_matching

このサンプルの内容:

  • Image_describerインターフェイスを使った特徴・記述の抽出
  • 検出した領域のマッチング
  • 検出した特徴とマッチング処理結果の対応点の表示

features_kvld_filter

このサンプルの内容:

  • K-VLDフィルタによる対応関係の推定 [KVLD12]

features_repeatability

オックスフォード大の画像データベース“Affine Covariant Regions Datasets”を使って、特徴・記述によるマッチングの精度を測定する方法


スポンサーリンク

multiview_robust_homography

このサンプルの内容:

  • マッチングした特徴間のロバストなホモグラフィー推定

multiview_robust_homography_guided

このサンプルの内容:

  • マッチングした特徴間のロバストなホモグラフィー[H]推定
  • 推定したマッチングをH Guided Filterで拡張
  • クエリ画像をリファレンス画像上にワープ

multiview_robust_fundamental

このサンプルの内容:

  • マッチングした特徴間のロバストな基礎行列推定

multiview_robust_fundamental_guided

このサンプルの内容:

  • マッチングした特徴間のロバストな基礎行列[F]推定
  • 推定したマッチングをF Guided Filterで拡張

multiview_robust_essential

このサンプルの内容:

  • マッチングした特徴間のロバストな基本行列[E]推定
  • 対応点の三角測量による3次元構造の算出

multiview_robust_essential_ba

このサンプルの内容:
以下の異なるカメラモデルで、シーンの構造とモーションをbundle_adjustmentで補正する:

  • [X], [f,R|t] (別々のカメラ)での補正
  • [X], [R|t], 共通の[f]での補正
  • [X], [R|t], 共通のBrown–Conrady歪みモデルでの補正

multiview_robust_essential_spherical

このサンプルの内容:

  • 2つの球面パノラマ間のロバストな基本行列[E]推定
  • 対応点から三角測量

exif_Parsing

このサンプルの内容:

  • JPEGファイルのEXIFメタデータのパース

exif_sensorWidthDatabase

このサンプルの内容:

  • カメラセンサーをデータベースと併用する

cameras_undisto_Brown

このサンプルの内容:

  • Brown–Conrady歪みモデルの既知の放射パラメータを用いた画像の歪み補正

本リストの拡充作業への参加に躊躇はいりません。

公式ドキュメントではサンプルが15個あるみたいに書いてあるけど、GitHubのリポジトリ上には14個しかなかったぞ。exif_sensorWidthDatabaseってどこにあるんだ?

PDFのドキュメントも存在するんですね↓

openMVG Documentation | Pierre MOULON & Bruno DUISIT

チュートリアルスライド資料も見つけた↓

OpenMVG Tutorial

部分的にフランス語っぽいですが。。。
この資料によると、openMVGにGUIを付けたプロジェクトRegard3Dというのがあるらしい。何だ面白そうじゃないか。


スポンサーリンク

関連記事

Raspberry Piでセンサーの常時稼働を検討する
OpenCVベースの背景差分ライブラリ『BGSLibrary』
Google App Engineのデプロイ失敗
C#で使えるNumPyライクな数値計算ライブラリ『NumSharp』
CGレンダラ研究開発のためのフレームワーク『Lightmetrica (ライトメトリカ)』
オープンソースのPhotogrammetryフレームワーク『Alice Vision』
OpenGVの用語
オープンソースのIT資産・ライセンス管理システム『Snipe-IT』
Kinect for Windows v2の日本価格決定
手を動かしながら学ぶデータマイニング
立体視を試してみた
画像処理を基礎から学べるキーエンスのサイト『画像道場』
ポリゴン用各種イテレータと関数セット
Multi-View Stereoによる3次元復元ライブラリ『OpenMVS』
疑似3D写真が撮れるiPhoneアプリ『Seene』がアップデートでついにフル3Dモデルが撮影できる...
写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』
OpenMayaのPhongShaderクラス
RSSフィードを読込んで表示するWordpressプラグイン『RSSImport』
OpenCVベースのコンパクトなARライブラリ『ArUco』
Amazon EC2ログイン用の秘密鍵を無くした場合の対処方法
CGのためのディープラーニング
iPhone・iPod touchで動作する知育ロボット『ROMO』
Maya API Reference
OpenCV 3.1から追加されたSfMモジュール
Structure from Motion (多視点画像からの3次元形状復元)
ブログをGoogle App EngineからAmazon EC2へ移行
まだ続くブログの不調
Unityの各コンポーネント間でのやり取り
SSII2014 チュートリアル講演会の資料
続・ディープラーニングの資料
人間の顔をそっくりそのままCGで復元する『Digital Emily Project』
OpenCVでiPhone6sのカメラをキャリブレーションする
clearcoat Shader
統計的な顔モデル
OpenCV
Autodesk Mementoでゴジラを3次元復元する
機械学習について理解するための可視化ツール『MLDemos』
Blenderの人体モデリングアドオン『MB-Lab』
ブログのデザイン変えました
YOLO (You Only Look Once):ディープラーニングによる一般物体検出手法
ニューラルネットワークと深層学習
WinSCP

コメント