Multi-View Environment:複数画像から3次元形状を再構築するライブラリ

ここのところ、やたらと2D→3D関連のライブラリやツールについて調べています。

このMVE(Multi-View Environment)というライブラリは、Structure-from-Motion、Multi-View Stereo、Surface Reconstruction(表面の再構築)までのパイプラインを実装したライブラリ。UMVE(Ultimate MVE)というGUIアプリケーションもある。

3条項BSDライセンス(BSD 3-Clause License)なのでライセンスと著作権を表示すれば商用利用も可能。

Multi-View Environment



Multi-View Environment(MVE)は、画像から形状を再構築するための完全なエンドツーエンドのパイプラインを実装しています。
これはStructure-from-MotionMulti-View StereoSurface Reconstructionを提供します。パイプラインの個々のステップは、コマンドラインアプリケーションとして利用可能ですが、ほとんどの機能は我々のユーザーインターフェイス UMVEからも利用可能です。
このプロジェクトはダルムシュタット工科大学のMichael Goeseleの研究グループが開発しました。


スポンサーリンク


MVEはC++で書かれており、クロスプラットフォームで使いやすいライブラリの効率的なセットが付属しています。コードは、Linux, MacOS, Windows上で実行できます。
MVEは外部ライブラリへの依存を最小限に止めています。MVEはlibpng, libjpeg, libtiffに依存しています。
UME(Ultimate MVE)と呼ばれるQTベースのフロントエンドアプリケーションは、マルチビューのデータセットの管理を容易にするためにこれらのライブラリ上に構築されています。

このシステムを使用し、ご自身の論文でMVEについて言及する際には、以下の論文を引用して下さい:
MVE – A Multi-View Reconstruction Environment
Simon Fuhrmann, Fabian Langguth and Michael Goesele
In: Proceedings of the Eurographics Workshop on Graphics and Cultural Heritage, Darmstadt, Germany, 2014.


スポンサーリンク

ソースコードはGitHub上にあり、ドキュメントはこちら↓
https://github.com/simonfuhrmann/mve/wiki/MVE-Users-Guide

MVEのPythonバインディングも存在する↓
https://github.com/davll/py-mve

そういえば、10月末に出るこちらの書籍の内容見本PDFと目次が森北出版公式ページで公開された。↓

3次元コンピュータビジョン計算ハンドブック

目次
第1章 序 論

第I部 コンピュータビジョンの基礎技術
第2章 楕円当てはめ
第3章 基礎行列の計算
第4章 三角測量
第5章 2画像からの3次元復元
第6章 射影変換の計算
第7章 平面三角測量
第8章 平面の3次元復元
第9章 楕円の解析と円の3次元計算

第II部 多画像からの3次元復元
第10章 多視点三角測量
第11章 バンドル調整
第12章 アフィンカメラの自己校正
第13章 透視投影カメラの自己校正


スポンサーリンク

関連記事

AfterEffectsプラグイン開発
UnityプロジェクトをGitHubで管理する
OpenSfM:PythonのStructure from Motionライブラリ
立体視を試してみた
顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト
Kubric:機械学習用アノテーション付き動画生成パイプライン
プラカラーストック:模型塗料を管理できるスマホアプリ
オープンソースの取引プラットフォーム
Point Cloud Consortiumのセミナー「3D点群の未来」に行ってきたよ
pythonの機械学習ライブラリ『scikit-learn』
Javaで作られたオープンソースの3DCGレンダラ『Sunflow』
3Dグラフィックスの入門書
C#で使える遺伝的アルゴリズムライブラリ『GeneticSharp』
iPhone x ロボットハッカソン~RomoのiPhone用SDKで目覚ましアプリを作る~
OpenCVの三角測量関数『cv::triangulatepoints』
ニューラルネットワークと深層学習
Unity ARKitプラグインサンプルのドキュメントを読む
Iterator
iPhone・iPod touchで動作する知育ロボット『ROMO』
機械学習について最近知った情報
クラスの基本
コンピュータビジョンの技術マップ
MB-Lab:Blenderの人体モデリングアドオン
Kaolin:3Dディープラーニング用のPyTorchライブラリ
Raspberry Pi 2のGPIOピン配置
OpenMayaのPhongShaderクラス
オープンソースの顔の動作解析ツールキット『OpenFace』
OpenCVの超解像(SuperResolution)モジュールを試す
Kinect for Windows V2のプレオーダー開始
Russian3DScannerのトポロジー転送ツール『WrapX』
オーバーロードとオーバーライド
Unityで強化学習できる『Unity ML-Agents』
2D→3D復元技術で使われる用語まとめ
Alice Vision:オープンソースのPhotogrammetryフレームワーク
DensePose:画像中の人物表面のUV座標を推定する
フリーのUV展開ツール Roadkill UV Tool
チャットツール用bot開発フレームワーク『Hubot』
WebGL開発に関する情報が充実してきている
OpenCVでカメラ画像から自己位置認識 (Visual Odometry)
Mitsuba 3:オープンソースの研究向けレンダラ
スクラッチで既存のキャラクターを立体化したい
Autodesk Mementoでゴジラを3次元復元する

コメント