だいぶ時間が空きましたが、引き続きOpenCVの3次元復元系の関数を見ていく。
今回はcalib3dモジュールにあるtriangulatePoints関数。つまり三角測量を行う関数ですね。
void cv::triangulatePoints(InputArray projMatr1,
InputArray projMatr2,
InputArray projPoints1,
InputArray projPoints2,
OutputArray points4D
)
三角測量で点を再構築します。
パラメータ
- projMatr1 1つ目のカメラの射影行列(3×4)
- projMatr2 2つ目のカメラの射影行列(3×4)
- projPoints1 1枚目の画像中の特徴点の配列(2xN)
- projPoints2 2枚目の画像中の1枚目に対応する特徴点の配列(2xN)
- points4D 同次座標における再構成後の点の配列(4×N)
この関数は、ステレオカメラによる観測によって(同次座標での)3次元点を再構築します。投影行列はstereoRectify関数で得ることができます。
注意
この関数を使うには、すべての入力データがfloat型である必要があります。
http://docs.opencv.org/3.2.0/d9/d0c/group__calib3d.html#gad3fc9a0c82b08df034234979960b778c
具体的な使い方を見て行こう。こちらのブログ記事に載っているコードを参考に書いてみた↓
http://moitkfm.blogspot.jp/2014/06/2.html
使う2枚の画像は、以前撮影したスターデストロイヤーのターンテーブル動画から1フレーム目と50フレーム目を抜粋して使用する。
撮影に使ったiPhone6sのカメラキャリブレーションデータもあるし。
以下がソースコード。AKAZE特徴で2枚の画像の対応点を求めることにした。
結果の可視化にvizモジュールを使っているので、vizも含めてビルド済みのOpenCV3.3.0-rcを使用。
AKAZE特徴のマッチング結果はこちら↓
で、三角測量の結果をvizモジュールで可視化したものがこちら↓
側面は何となくそれっぽいぞ。と思って上から見てみたら、なんだか湾曲している。。。
レンズっぽい球面な歪み方だな。
あ、以前作った連番はすでにレンズの歪み補正を終えているから、補正処理は必要無いのか。
追記：よくよく考えたら、関数の出力は同次座標だからそのまま3次元ベクトルに代入して表示しちゃダメだな。
関連記事
Unityの各コンポーネント間でのやり取り
DensePose：画像中の人物表面のUV座標を推定する
Fast R-CNN：ディープラーニングによる一般物体検出手...
geometry3Sharp：Unity C#で使えるポリゴ...
UnityでTweenアニメーションを実装できる3種類の無料...
U-Net：ディープラーニングによるSemantic Seg...
続・ディープラーニングの資料
BGSLibrary：OpenCVベースの背景差分ライブラリ
書籍『OpenCV 3 プログラミングブック』を購入
オープンソースの顔認識フレームワーク『OpenBR』
SSII2014 チュートリアル講演会の資料
オープンソースの取引プラットフォーム
Python.NET：Pythonと.NETを連携させるパッ...
COLMAP：オープンソースのSfM・MVSツール
ManimML：機械学習の概念を視覚的に説明するためのライブ...
OpenCVで平均顔を作るチュートリアル
チャットツール用bot開発フレームワーク『Hubot』
TorchStudio：PyTorchのための統合開発環境と...
libigl：軽量なジオメトリ処理ライブラリ
3Dグラフィックスの入門書
Raspberry Piでセンサーの常時稼働を検討する
SDカードサイズのコンピューター『Intel Edison』
PyDataTokyo主催のDeep Learning勉強会
Quartus II
3分の動画でプログラミングを学習できるサイト『ドットインスト...
Swark：コードからアーキテクチャ図を作成できるVSCod...
自前のShaderがおかしい件
MVStudio：オープンソースのPhotogrammetr...
Mask R-CNN：ディープラーニングによる一般物体検出・...
Mechanizeで要認証Webサイトをスクレイピング
SONY製のニューラルネットワークライブラリ『NNabla』
Rerun：マルチモーダルデータの可視化アプリとSDK
3D復元技術の情報リンク集
BlenderでPhotogrammetryできるアドオン
Netron：機械学習モデルを可視化するツール
Blendify：コンピュータービジョン向けBlenderラ...
SONYの自律型エンタテインメントロボット『aibo』
openMVG：複数視点画像から3次元形状を復元するライブラ...
AndroidもopenGLも初心者さ (でもJavaは知っ...
機械学習手法『Random Forest』
ポリゴン用各種イテレータと関数セット
Faster R-CNN：ディープラーニングによる一般物体検...
コメント