Multi-View Environment:複数画像から3次元形状を再構築するライブラリ

ここのところ、やたらと2D→3D関連のライブラリやツールについて調べています。

このMVE(Multi-View Environment)というライブラリは、Structure-from-Motion、Multi-View Stereo、Surface Reconstruction(表面の再構築)までのパイプラインを実装したライブラリ。UMVE(Ultimate MVE)というGUIアプリケーションもある。

3条項BSDライセンス(BSD 3-Clause License)なのでライセンスと著作権を表示すれば商用利用も可能。

Multi-View Environment



Multi-View Environment(MVE)は、画像から形状を再構築するための完全なエンドツーエンドのパイプラインを実装しています。
これはStructure-from-MotionMulti-View StereoSurface Reconstructionを提供します。パイプラインの個々のステップは、コマンドラインアプリケーションとして利用可能ですが、ほとんどの機能は我々のユーザーインターフェイス UMVEからも利用可能です。
このプロジェクトはダルムシュタット工科大学のMichael Goeseleの研究グループが開発しました。



MVEはC++で書かれており、クロスプラットフォームで使いやすいライブラリの効率的なセットが付属しています。コードは、Linux, MacOS, Windows上で実行できます。
MVEは外部ライブラリへの依存を最小限に止めています。MVEはlibpng, libjpeg, libtiffに依存しています。
UME(Ultimate MVE)と呼ばれるQTベースのフロントエンドアプリケーションは、マルチビューのデータセットの管理を容易にするためにこれらのライブラリ上に構築されています。

このシステムを使用し、ご自身の論文でMVEについて言及する際には、以下の論文を引用して下さい:
MVE – A Multi-View Reconstruction Environment
Simon Fuhrmann, Fabian Langguth and Michael Goesele
In: Proceedings of the Eurographics Workshop on Graphics and Cultural Heritage, Darmstadt, Germany, 2014.

ソースコードはGitHub上にあり、ドキュメントはこちら↓
https://github.com/simonfuhrmann/mve/wiki/MVE-Users-Guide

MVEのPythonバインディングも存在する↓
https://github.com/davll/py-mve

そういえば、10月末に出るこちらの書籍の内容見本PDFと目次が森北出版公式ページで公開された。↓

3次元コンピュータビジョン計算ハンドブック

目次
第1章 序 論

第I部 コンピュータビジョンの基礎技術
第2章 楕円当てはめ
第3章 基礎行列の計算
第4章 三角測量
第5章 2画像からの3次元復元
第6章 射影変換の計算
第7章 平面三角測量
第8章 平面の3次元復元
第9章 楕円の解析と円の3次元計算

第II部 多画像からの3次元復元
第10章 多視点三角測量
第11章 バンドル調整
第12章 アフィンカメラの自己校正
第13章 透視投影カメラの自己校正

関連記事

C++の抽象クラス

adskShaderSDK

iPhoneアプリ開発 Xcode 5のお作法

MeshroomでPhotogrammetry

オープンソースの顔認識フレームワーク『OpenBR』

PyTorch3D:3Dコンピュータービジョンライブラリ

自前Shaderの件 解決しました

BGSLibrary:OpenCVベースの背景差分ライブラリ

オープンソースのプリント基板設計ツール『KiCad』

trimesh:PythonでポリゴンMeshを扱うライブラリ

2D→3D復元技術で使われる用語まとめ

OANDAのfxTrade API

MPFB2:Blenderの人体モデリングアドオン

Unityの薄い本

Google App Engine上のWordPressでFlickrの画像を貼る

Iridescence:プロトタイピング向け軽量3D可視化ライブラリ

畳み込みニューラルネットワーク (CNN: Convolutional Neural Network...

Deep Learningとその他の機械学習手法の性能比較

続・ディープラーニングの資料

WordPress on Windows Azure

LuxCoreRender:オープンソースの物理ベースレンダラ

PythonのHTML・XMLパーサー『BeautifulSoup』

DCGAN (Deep Convolutional GAN):畳み込みニューラルネットワークによる敵...

顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト

Manim:Pythonで使える数学アニメーションライブラリ

AfterEffectsプラグイン開発

機械学習手法『Random Forest』

MFnDataとMFnAttribute

SegNet:ディープラーニングによるSemantic Segmentation手法

Google App EngineでWordPress

PCA (主成分分析)

windowsのエクスプローラでRAW画像のサムネイルを表示するソフト『FastPictureVie...

Leap MotionでMaya上のオブジェクトを操作できるプラグイン

口笛から作曲できるスマホアプリ『Chordana Composer』

1枚の画像からマテリアルを作成できる無料ツール『Materialize』

Faster R-CNN:ディープラーニングによる一般物体検出手法

フォトンの放射から格納までを可視化した動画

HD画質の無駄遣い その2

PureRef:リファレンス画像専用ビューア

iPhone x ロボットハッカソン~RomoのiPhone用SDKで目覚ましアプリを作る~

Google App Engineのデプロイ失敗

MLDemos:機械学習について理解するための可視化ツール

コメント