だいぶ時間が空きましたが、引き続きOpenCVの3次元復元系の関数を見ていく。
今回はcalib3dモジュールにあるtriangulatePoints関数。つまり三角測量を行う関数ですね。
void cv::triangulatePoints(InputArray projMatr1,
InputArray projMatr2,
InputArray projPoints1,
InputArray projPoints2,
OutputArray points4D
)
三角測量で点を再構築します。
パラメータ
- projMatr1 1つ目のカメラの射影行列(3×4)
- projMatr2 2つ目のカメラの射影行列(3×4)
- projPoints1 1枚目の画像中の特徴点の配列(2xN)
- projPoints2 2枚目の画像中の1枚目に対応する特徴点の配列(2xN)
- points4D 同次座標における再構成後の点の配列(4×N)
この関数は、ステレオカメラによる観測によって(同次座標での)3次元点を再構築します。投影行列はstereoRectify関数で得ることができます。
注意
この関数を使うには、すべての入力データがfloat型である必要があります。
http://docs.opencv.org/3.2.0/d9/d0c/group__calib3d.html#gad3fc9a0c82b08df034234979960b778c
具体的な使い方を見て行こう。こちらのブログ記事に載っているコードを参考に書いてみた↓
http://moitkfm.blogspot.jp/2014/06/2.html
使う2枚の画像は、以前撮影したスターデストロイヤーのターンテーブル動画から1フレーム目と50フレーム目を抜粋して使用する。
撮影に使ったiPhone6sのカメラキャリブレーションデータもあるし。
以下がソースコード。AKAZE特徴で2枚の画像の対応点を求めることにした。
結果の可視化にvizモジュールを使っているので、vizも含めてビルド済みのOpenCV3.3.0-rcを使用。
AKAZE特徴のマッチング結果はこちら↓
で、三角測量の結果をvizモジュールで可視化したものがこちら↓
側面は何となくそれっぽいぞ。と思って上から見てみたら、なんだか湾曲している。。。
レンズっぽい球面な歪み方だな。
あ、以前作った連番はすでにレンズの歪み補正を終えているから、補正処理は必要無いのか。
追記：よくよく考えたら、関数の出力は同次座標だからそのまま3次元ベクトルに代入して表示しちゃダメだな。
関連記事
続・ディープラーニングの資料
UnityでOpenCVを使うには？
ZScript
3D Gaussian Splatting：リアルタイム描画...
Google App Engineのデプロイ失敗
BlenderのPython環境にPyTorchをインストー...
Raspberry Pi
C++の抽象クラス
Human Generator：Blenderの人体生成アド...
Paul Debevec
clearcoat Shader
2D→3D復元技術で使われる用語まとめ
PythonでMayaのShapeノードプラグインを作る
書籍『仕事ではじめる機械学習』を読みました
UnityでLight Shaftを表現する
NeRF (Neural Radiance Fields)：...
ZBrushのZScript入門
MVStudio：オープンソースのPhotogrammetr...
Maya API Reference
cvui：OpenCVのための軽量GUIライブラリ
OpenCV
HerokuでMEAN stack
BGSLibrary：OpenCVベースの背景差分ライブラリ
Facebookの顔認証技術『DeepFace』
Kinect for Windows v2の日本価格決定
ManuelBastioniLAB：人体モデリングできるBl...
SSD (Single Shot Multibox Dete...
なんかすごいサイト
Photogrammetry (写真測量法)
R-CNN (Regions with CNN featur...
網元AMIで作ったWordpressサイトのインスタンスをt...
Dlib：C++の機械学習ライブラリ
書籍『ROSプログラミング』
Runway ML：クリエイターのための機械学習ツール
Quartus II
Unityで学ぶC#
Unity ARKitプラグインサンプルのチュートリアルを読...
Pythonの自然言語処理ライブラリ『NLTK(Natura...
Pylearn2：ディープラーニングに対応したPythonの...
WordPressプラグインの作り方
Open Shading Language (OSL)
OpenMVSのサンプルを動かしてみる
コメント