Adobeの手振れ補正機能『ワープスタビライザー』の秘密

以前OpenCVで動画の手振れ補正をするソースコードを見たけど、
https://blog.negativemind.com/2014/06/05/opencv%E3%81%A7%E5%8B%95%E7%94%BB%E3%81%AE%E6%89%8B%E6%8C%AF%E3%82%8C%E8%A3%9C%E6%AD%A3/

ソフトウェア処理による手振れ補正機能なんてものは、当然Adobeのツールにも実装されているわけです。
Adobe Premiere ProとAdobe AfterEffectsでは、手振れ補正機能がワープスタビライザーという名前のエフェクトとして搭載されているので、手軽に試すことができる。

そんで、Adobe公式のFocus In BlogでAfterEffectsのワープスタビライザー機能の解説記事を見つけた↓
https://blogs.adobe.com/creativestation/warp_stabilizer

Adobe After Effects CS5.5の新機能「ワープスタビライザー」は、強力な手ぶれ補正機能が簡単に利用できるということで発表当初から高い評価をいただいています。このワープスタビライザーの機能の裏側で何が行われているのでしょうか??


素材動画


特徴点のトラッキング


手振れ補正結果


古い手法での手振れ補正結果


関連記事

TensorFlowでCGを微分できる『TensorFlow Graphics』

SDカードサイズのコンピューター『Intel Edison』

NVIDIA Quadro OpenGL DriverのDeep Color不具合の対処方法

OpenFace:Deep Neural Networkによる顔の個人識別フレームワーク

Active Appearance Models(AAM)

Facebookの顔認証技術『DeepFace』

写真から3Dメッシュの生成・編集ができる無料ツール『Autodesk Memento』

OpenCVでiPhone6sのカメラをキャリブレーションする

OpenGVの用語

Regard3D:オープンソースのStructure from Motionツール

Googleが画像解析旅行ガイドアプリのJetpac社を買収

OpenCVの三角測量関数『cv::triangulatepoints』

BlenderProc:Blenderで機械学習用の画像データを生成するPythonツール

BGSLibrary:OpenCVベースの背景差分ライブラリ

Autodesk Mementoでゴジラを3次元復元する

NeRF (Neural Radiance Fields):深層学習による新規視点合成

Google Colaboratoryで遊ぶ準備

OpenCVで顔のランドマークを検出する『Facemark API』

OpenGV:画像からカメラの3次元位置・姿勢を推定するライブラリ

bpy-renderer:レンダリング用Pythonパッケージ

BlenderでPhotogrammetryできるアドオン

YOLO (You Only Look Once):ディープラーニングによる一般物体検出手法

ベイズ推定とグラフィカルモデル

統計的な顔モデル

OpenCV

CycleGAN:ドメイン関係を学習した画像変換

ポイントクラウドコンソーシアム

R-CNN (Regions with CNN features):ディープラーニングによる一般物体...

ArUco:OpenCVベースのコンパクトなARライブラリ

OpenAR:OpenCVベースのマーカーARライブラリ

MeshroomでPhotogrammetry

OpenCV 3.1とopencv_contribモジュールをVisual Studio 2015で...

OpenCVのfindEssentialMat関数を使ったサンプルを読んでみる

池袋パルコで3Dのバーチャルフィッティング『ウェアラブル クロージング バイ アーバンリサーチ』

PyTorch3D:3Dコンピュータービジョンライブラリ

写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

SegNet:ディープラーニングによるSemantic Segmentation手法

OpenCV バージョン4がリリースされた!

3D復元技術の情報リンク集

Cartographer:オープンソースのSLAMライブラリ

fSpy:1枚の写真からカメラパラメーターを割り出すツール

Multi-View Environment:複数画像から3次元形状を再構築するライブラリ

コメント