こちらのサイトに手振れ補正する理屈とOpenCVで書いたサンプルが載ってる。
Simple video stabilization using OpenCV
- オプティカルフローを用いて、前後フレーム間のトランスフォームを求める。
トランスフォームは3つのパラメータ：dx, dy, da(角度)で構成され、基本的に剛体の剛性のユークリッド変換とし、スケーリングや共有は考慮しない。
- ブレの軌跡を得るために、各フレームのx, y, 角度のトランスフォームを保存する。
- 移動平均窓を使用して軌跡を滑らかにする。
ユーザが平滑化に使用するフレーム数となる半径を指定する。
- 以下のように新しいトランスフォームを求める。
新しいトランスフォーム = 元のトランスフォーム + (平滑化した軌跡 – 元の軌跡)
- 動画に新しいトランスフォームを適用する。
サンプルコードもある。
補正結果比較動画。
2020年10月 追記：このC++実装をもとに有志がPythonで実装したPython Video StabilizationがGitHubで公開されている↓
https://github.com/AdamSpannbauer/python_video_stab
2019年1月 追記：Learn OpenCVでも手振れ補正のチュートリアルが公開されたぞ↓
https://www.learnopencv.com/video-stabilization-using-point-feature-matching-in-opencv/
関連記事
NumSharp：C#で使えるNumPyライクな数値計算ライ...
「ベンジャミン·バトン数奇な人生」でどうやってCGの顔を作っ...
手を動かしながら学ぶデータマイニング
UnityでPoint Cloudを表示する方法
Amazon Web ServicesでWordPress
python-twitterで自分のお気に入りを取得する
MeshLab：3Dオブジェクトの確認・変換に便利なフリーウ...
Accord.NET Framework：C#で使える機械学...
HD画質の無駄遣い
AfterEffectsプラグイン開発
科学技術計算向けスクリプト言語『Julia』
機械学習について最近知った情報
OpenCVのfindEssentialMat関数を使ったサ...
geometry3Sharp：Unity C#で使えるポリゴ...
チャットツール用bot開発フレームワーク『Hubot』
Rerun：マルチモーダルデータの可視化アプリとSDK
自前Shaderの件 解決しました
DCGAN (Deep Convolutional GAN)...
PeopleSansPeople：機械学習用の人物データをU...
Runway ML：クリエイターのための機械学習ツール
Unityの薄い本
BlenderでPhotogrammetryできるアドオン
MythTV：Linuxでテレビの視聴・録画ができるオープン...
立体視を試してみた
WebGL開発に関する情報が充実してきている
OpenCV3.3.0でsfmモジュールのビルドに成功！
ブラウザ操作自動化ツール『Selenium』を試す
Python for Unity：UnityEditorでP...
3Dモデルを立体視で確認できるVRアプリを作っている
Human Generator：Blenderの人体生成アド...
TensorSpace.js：ニューラルネットワークの構造を...
オープンソースの取引プラットフォーム
Mean Stack開発の最初の一歩
TeleSculptor：空撮動画からPhotogramme...
オープンソースのIT資産・ライセンス管理システム『Snipe...
参考書
Polyscope：3Dデータ操作用GUIライブラリ
Qlone：スマホのカメラで3Dスキャンできるアプリ
Math.NET Numerics：Unityで使える数値計...
Adobe MAX 2015
Theia：オープンソースのStructure from M...
hloc：SuperGlueで精度を向上させたSfM・Vis...
コメント