だいぶ時間が空きましたが、引き続きOpenCVの3次元復元系の関数を見ていく。
OpenCVのfindEssentialMat関数を使ったサンプルを読んでみる本来なら例の書籍を読み進めて少しずつ理解していくつもりだったけど、しんどい。。。 書籍はなかなか読み進められなかったので、飛ばし読みしてプログラムを動かしながら徐々にディティールを理解していく方針へ切り替えた(笑) 何度か格闘するも上手くい...
今回はcalib3dモジュールにあるtriangulatePoints関数。つまり三角測量を行う関数ですね。
void cv::triangulatePoints(InputArray projMatr1, InputArray projMatr2, InputArray projPoints1, InputArray projPoints2, OutputArray points4D )
三角測量で点を再構築します。
パラメータ
- projMatr1 1つ目のカメラの射影行列(3×4)
- projMatr2 2つ目のカメラの射影行列(3×4)
- projPoints1 1枚目の画像中の特徴点の配列(2xN)
- projPoints2 2枚目の画像中の1枚目に対応する特徴点の配列(2xN)
- points4D 同次座標における再構成後の点の配列(4×N)
この関数は、ステレオカメラによる観測によって(同次座標での)3次元点を再構築します。投影行列はstereoRectify関数で得ることができます。
注意
この関数を使うには、すべての入力データがfloat型である必要があります。
スポンサーリンク
http://docs.opencv.org/3.2.0/d9/d0c/group__calib3d.html#gad3fc9a0c82b08df034234979960b778c
スポンサーリンク
具体的な使い方を見て行こう。こちらのブログ記事に載っているコードを参考に書いてみた↓
http://moitkfm.blogspot.jp/2014/06/2.html
使う2枚の画像は、以前撮影したスターデストロイヤーのターンテーブル動画から1フレーム目と50フレーム目を抜粋して使用する。
撮影に使ったiPhone6sのカメラキャリブレーションデータもあるし。
![](https://blog.negativemind.com/wp-content/uploads/2016/09/opencviphone6s.jpg)
OpenCVでiPhone6sのカメラをキャリブレーションする
世間ではiPhone7が発売されていますが、オイラは引き続きiPhone6sを使います(笑) 1年前にiPhone6Sへ機種変更してからiPhone6sのカメラで結構たくさん写真や動画を撮ったので、画像・動画がだいぶ溜まった。 それらの画像...
以下がソースコード。AKAZE特徴で2枚の画像の対応点を求めることにした。
結果の可視化にvizモジュールを使っているので、vizも含めてビルド済みのOpenCV3.3.0-rcを使用。
AKAZE特徴のマッチング結果はこちら↓
![](https://blog.negativemind.com/wp-content/uploads/2017/08/matchImage.jpg)
で、三角測量の結果をvizモジュールで可視化したものがこちら↓
![](https://blog.negativemind.com/wp-content/uploads/2017/08/viz_1.jpg)
側面は何となくそれっぽいぞ。と思って上から見てみたら、なんだか湾曲している。。。
![](https://blog.negativemind.com/wp-content/uploads/2017/08/viz_2.jpg)
レンズっぽい球面な歪み方だな。
あ、以前作った連番はすでにレンズの歪み補正を終えているから、補正処理は必要無いのか。
追記:よくよく考えたら、関数の出力は同次座標だからそのまま3次元ベクトルに代入して表示しちゃダメだな。
スポンサーリンク
関連記事
スクレイピング
Deep Fluids:流体シミュレーションをディープラーニングで近似する
geometry3Sharp:Unity C#で使えるポリゴン操作ライブラリ
SSII 2014 デモンストレーションセッションのダイジェスト動画
iPadをハンディ3Dスキャナにするガジェット『iSense 3D Scanner』
Autodesk Mementoでゴジラを3次元復元する
定数
統計的な顔モデル
書籍『ROSプログラミング』
html5のcanvasの可能性
UnityでOpenCVを使うには?
OpenCVで動画の手ぶれ補正
libigl:軽量なジオメトリ処理ライブラリ
畳み込みニューラルネットワーク (CNN: Convolutional Neural Network...
OpenMayaのPhongShaderクラス
Mitsuba 3:オープンソースの研究向けレンダラ
クラスの基本
Amazon EC2ログイン用の秘密鍵を無くした場合の対処方法
Seleniumを使ったFXや株の自動取引
機械学習に役立つPythonライブラリ一覧
CGレンダラ研究開発のためのフレームワーク『Lightmetrica (ライトメトリカ)』
NeRF (Neural Radiance Fields):深層学習による未知視点合成
NumSharp:C#で使えるNumPyライクな数値計算ライブラリ
3Dスキャンしたテクスチャから照明を除去するUnityツール『De Lighting tool』
UnityでShaderの入力パラメータとして行列を渡す
OpenCV バージョン4がリリースされた!
3Dスキャンに基づくプロシージャルフェイシャルアニメーション
PythonでMayaのShapeノードプラグインを作る
FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ
TensorSpace.js:ニューラルネットワークの構造を可視化するフレームワーク
OpenFace:Deep Neural Networkによる顔の個人識別フレームワーク
MRenderUtil::raytrace
OpenCVのバージョン3が正式リリースされたぞ
顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト
PeopleSansPeople:機械学習用の人物データをUnityで生成する
Raspberry PiでIoTごっこ
OpenMVS:Multi-View Stereoによる3次元復元ライブラリ
Google App Engineのデプロイ失敗
ニューラルネットワークで画像分類
UnrealCLR:Unreal Engineで.NET Coreを利用できるプラグイン
Manim:Pythonで使える数学アニメーションライブラリ
書籍『イラストで学ぶ ディープラーニング』
コメント