Active Appearance Models(AAM)

勉強のためのメモ。
最近こちらの資料を見ていて、顔の器官を検出する手法っていっぱい研究されてるんだなぁ、と。



そして、器官の検出の手法って、トラッキングとニアリーのようで。



器官の追跡は、ただのオプティカルフロートラッキングではなくて、顔に適した幾何学的制約を設けて推定するアプローチが基本みたい。
よく聞くAAM(Active Appearance Models)は、ある特徴点群の配置を基本形状として、その基本形状からのAppearance(見え方)の変化(歪み)を表現したモデル。
ある人の顔をAAMでモデル化しておくと、その人の表情変化した顔に対して顔の見え方(Appearance)がどのように変化した(歪んだ)かを知る事ができる。
AAMの構造はシンプルで、顔の形(shape)と見え方(appearance)がそれぞれ単純な線形結合として表現されている。

【チュートリアル】 Active Appearace Models(入門編)
Iain Matthews:映画Avatarの顔表情キャプチャシステムを開発した研究者

関連記事

コンピュータビジョンの技術マップ

3D復元技術の情報リンク集

OpenCVで顔のランドマークを検出する『Facemark ...

hloc:SuperGlueで精度を向上させたSfM・Vis...

ニューラルネットワークで画像分類

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

機械学習手法『Random Forest』

Rerun:マルチモーダルデータの可視化アプリとSDK

OpenCVでiPhone6sのカメラをキャリブレーションす...

OpenCV

VGGT:マルチビュー・フィードフォワード型3Dビジョン基盤...

OpenCVでPhotoshopのプラグイン開発

bpy-renderer:レンダリング用Pythonパッケー...

ニューラルネットワークと深層学習

海外ドラマのChromaKey

機械学習について最近知った情報

OpenCV 3.1から追加されたSfMモジュール

UnityでOpenCVを使うには?

OpenCVで動画の手ぶれ補正

OpenCV 3.1のsfmモジュールを試す

Theia:オープンソースのStructure from M...

OpenGVの用語

OpenSfM:PythonのStructure from ...

ベイズ推定とグラフィカルモデル

スクラッチで既存のキャラクターを立体化したい

Super Resolution:OpenCVの超解像処理モ...

TeleSculptor:空撮動画からPhotogramme...

YOLO (You Only Look Once):ディープ...

写真に3Dオブジェクトを違和感無く合成する『3DPhotoM...

fSpy:1枚の写真からカメラパラメーターを割り出すツール

Fast R-CNN:ディープラーニングによる一般物体検出手...

統計的な顔モデル

BGSLibrary:OpenCVベースの背景差分ライブラリ

OpenFace:Deep Neural Networkによ...

OpenCV 3.3.0 contribのsfmモジュールの...

COLMAP:オープンソースのSfM・MVSツール

画像認識による位置情報取得 - Semi-Direct Mo...

OpenCV3.3.0でsfmモジュールのビルドに成功!

池袋パルコで3Dのバーチャルフィッティング『ウェアラブル ク...

画像生成AI Stable Diffusionで遊ぶ

ArUco:OpenCVベースのコンパクトなARライブラリ

NeRF (Neural Radiance Fields):...

コメント