Active Appearance Models(AAM)

勉強のためのメモ。
最近こちらの資料を見ていて、顔の器官を検出する手法っていっぱい研究されてるんだなぁ、と。



そして、器官の検出の手法って、トラッキングとニアリーのようで。



器官の追跡は、ただのオプティカルフロートラッキングではなくて、顔に適した幾何学的制約を設けて推定するアプローチが基本みたい。
よく聞くAAM(Active Appearance Models)は、ある特徴点群の配置を基本形状として、その基本形状からのAppearance(見え方)の変化(歪み)を表現したモデル。
ある人の顔をAAMでモデル化しておくと、その人の表情変化した顔に対して顔の見え方(Appearance)がどのように変化した(歪んだ)かを知る事ができる。
AAMの構造はシンプルで、顔の形(shape)と見え方(appearance)がそれぞれ単純な線形結合として表現されている。

【チュートリアル】 Active Appearace Models(入門編)
Iain Matthews:映画Avatarの顔表情キャプチャシステムを開発した研究者

関連記事

ディープラーニング

Kubric:機械学習用アノテーション付き動画生成パイプライ...

Runway ML:クリエイターのための機械学習ツール

MeshroomでPhotogrammetry

FacebookがDeep learningツールの一部をオ...

オープンソースの顔認識フレームワーク『OpenBR』

PyTorch3D:3Dコンピュータービジョンライブラリ

BlenderProc:Blenderで機械学習用の画像デー...

2D→3D復元技術で使われる用語まとめ

OpenSfM:PythonのStructure from ...

Dlib:C++の機械学習ライブラリ

NeRF (Neural Radiance Fields):...

cvui:OpenCVのための軽量GUIライブラリ

Live CV:インタラクティブにComputer Visi...

YOLO (You Only Look Once):ディープ...

U-Net:ディープラーニングによるSemantic Seg...

ベイズ推定とグラフィカルモデル

池袋パルコで3Dのバーチャルフィッティング『ウェアラブル ク...

OpenCVで顔のモーフィングを実装する

オープンソースのロボットアプリケーションフレームワーク『RO...

Multi-View Environment:複数画像から3...

TensorFlowでCGを微分できる『TensorFlow...

OpenCV バージョン4がリリースされた!

SegNet:ディープラーニングによるSemantic Se...

ニューラルネットワークで画像分類

DensePose:画像中の人物表面のUV座標を推定する

Blendify:コンピュータービジョン向けBlenderラ...

DUSt3R:3Dコンピュータービジョンの基盤モデル

OpenCVのバージョン3が正式リリースされたぞ

OpenCVでPhotoshopのプラグイン開発

CGのためのディープラーニング

Point Cloud Libraryに動画フォーマットが追...

AR (Augmented Reality)とDR (Dim...

ArUco:OpenCVベースのコンパクトなARライブラリ

Qlone:スマホのカメラで3Dスキャンできるアプリ

COLMAP:オープンソースのSfM・MVSツール

オープンソースの顔の動作解析ツールキット『OpenFace』

Alice Vision:オープンソースのPhotogram...

hloc:SuperGlueで精度を向上させたSfM・Vis...

OpenCVでiPhone6sのカメラをキャリブレーションす...

OpenCV 3.1から追加されたSfMモジュール

UnityでOpenCVを使うには?

コメント