こちらのサイトに手振れ補正する理屈とOpenCVで書いたサンプルが載ってる。
Simple video stabilization using OpenCV
- オプティカルフローを用いて、前後フレーム間のトランスフォームを求める。
トランスフォームは3つのパラメータ：dx, dy, da(角度)で構成され、基本的に剛体の剛性のユークリッド変換とし、スケーリングや共有は考慮しない。
- ブレの軌跡を得るために、各フレームのx, y, 角度のトランスフォームを保存する。
- 移動平均窓を使用して軌跡を滑らかにする。
ユーザが平滑化に使用するフレーム数となる半径を指定する。
- 以下のように新しいトランスフォームを求める。
新しいトランスフォーム = 元のトランスフォーム + (平滑化した軌跡 – 元の軌跡)
- 動画に新しいトランスフォームを適用する。
サンプルコードもある。
補正結果比較動画。
2020年10月 追記：このC++実装をもとに有志がPythonで実装したPython Video StabilizationがGitHubで公開されている↓
https://github.com/AdamSpannbauer/python_video_stab
2019年1月 追記：Learn OpenCVでも手振れ補正のチュートリアルが公開されたぞ↓
https://www.learnopencv.com/video-stabilization-using-point-feature-matching-in-opencv/
関連記事
Kaolin：3Dディープラーニング用のPyTorchライブ...
WordPressプラグインによるサイトマップの自動生成
ManuelBastioniLAB：人体モデリングできるBl...
Point Cloud Libraryに動画フォーマットが追...
仮想関数
MythTV：Linuxでテレビの視聴・録画ができるオープン...
書籍『ゼロから作るDeep Learning』で自分なりに学...
FreeMoCap Project：オープンソースのマーカー...
OpenCVでiPhone6sのカメラをキャリブレーションす...
iOSで使えるJetpac社の物体認識SDK『DeepBel...
3Dモデルを立体視で確認できるVRアプリを作っている
UnityでTweenアニメーションを実装できる3種類の無料...
Deep Learningとその他の機械学習手法の性能比較
SDカードサイズのコンピューター『Intel Edison』
Google製オープンソース機械学習ライブラリ『Tensor...
CycleGAN：ドメイン関係を学習した画像変換
Pylearn2：ディープラーニングに対応したPythonの...
WordPressのサーバ引っ越し方法を考える
立体視を試してみた
pythonの機械学習ライブラリ『scikit-learn』
Raspberry Pi 2を買いました
Math Inspector：科学計算向けビジュアルプログラ...
Pix2Pix：CGANによる画像変換
Adobeの手振れ補正機能『ワープスタビライザー』の秘密
Kinect for Windows V2のプレオーダー開始
海外ドラマのChromaKey
機械学習について最近知った情報
頭蓋骨からの顔復元と進化過程の可視化
uvでWindows11のPython環境を管理する
プログラムによる景観の自動生成
Google App Engineのデプロイ失敗
TensorFlowでCGを微分できる『TensorFlow...
cvui：OpenCVのための軽量GUIライブラリ
Kubric：機械学習用アノテーション付き動画生成パイプライ...
Raspberry Pi 2のGPIOピン配置
Live CV：インタラクティブにComputer Visi...
Google App Engine上のWordPressでA...
MPFB2：Blenderの人体モデリングアドオン
Swark：コードからアーキテクチャ図を作成できるVSCod...
Unityで強化学習できる『Unity ML-Agents』
Javaで作られたオープンソースの3DCGレンダラ『Sunf...
RefineNet (Multi-Path Refineme...
コメント