こちらのサイトに手振れ補正する理屈とOpenCVで書いたサンプルが載ってる。
Simple video stabilization using OpenCV
- オプティカルフローを用いて、前後フレーム間のトランスフォームを求める。
トランスフォームは3つのパラメータ：dx, dy, da(角度)で構成され、基本的に剛体の剛性のユークリッド変換とし、スケーリングや共有は考慮しない。
- ブレの軌跡を得るために、各フレームのx, y, 角度のトランスフォームを保存する。
- 移動平均窓を使用して軌跡を滑らかにする。
ユーザが平滑化に使用するフレーム数となる半径を指定する。
- 以下のように新しいトランスフォームを求める。
新しいトランスフォーム = 元のトランスフォーム + (平滑化した軌跡 – 元の軌跡)
- 動画に新しいトランスフォームを適用する。
サンプルコードもある。
補正結果比較動画。
2020年10月 追記：このC++実装をもとに有志がPythonで実装したPython Video StabilizationがGitHubで公開されている↓
https://github.com/AdamSpannbauer/python_video_stab
2019年1月 追記：Learn OpenCVでも手振れ補正のチュートリアルが公開されたぞ↓
https://www.learnopencv.com/video-stabilization-using-point-feature-matching-in-opencv/
関連記事
OpenMVSのサンプルを動かしてみる
プログラミングスキルとは何か？
OpenCV バージョン4がリリースされた！
AMIMOTO（PVM版）で作成したインスタンスをAMIMO...
WordPressプラグインの作り方
clearcoat Shader
Unity ARKitプラグインサンプルのドキュメントを読む
Kinect for Windows v2の日本価格決定
Alice Vision：オープンソースのPhotogram...
Verilog HDL
UnityのGameObjectの向きをScriptで制御す...
3D Gaussian Splatting：リアルタイム描画...
trimesh：PythonでポリゴンMeshを扱うライブラ...
OpenCVで顔のモーフィングを実装する
R-CNN (Regions with CNN featur...
オープンソースの取引プラットフォーム
GoogleのDeep Learning論文
Deep Fluids：流体シミュレーションをディープラーニ...
顔追跡による擬似3D表示『Dynamic Perspecti...
DCGAN (Deep Convolutional GAN)...
畳み込みニューラルネットワーク (CNN: Convolut...
MeshroomでPhotogrammetry
Windows10でPyTorchをインストールしてVSCo...
python-twitterで自分のお気に入りを取得する
GAN (Generative Adversarial Ne...
Amazon Web ServicesでWordPress
IronPythonを使ってUnity上でPythonのコー...
タマムシっぽい質感
Unreal Engineの薄い本
写真から3Dメッシュの生成・編集ができる無料ツール『Auto...
Composition Rendering：Blenderに...
1枚の画像からマテリアルを作成できる無料ツール『Materi...
libigl：軽量なジオメトリ処理ライブラリ
Manim：Pythonで使える数学アニメーションライブラリ
フォトンの放射から格納までを可視化した動画
BlenderでPhotogrammetryできるアドオン
openMVGをWindows10 Visual Studi...
html5のcanvasの可能性
Deep Learningとその他の機械学習手法の性能比較
UnityのTransformクラスについて調べてみた
Google App Engineのデプロイ失敗
Paul Debevec
コメント