Active Appearance Models(AAM)

勉強のためのメモ。
最近こちらの資料を見ていて、顔の器官を検出する手法っていっぱい研究されてるんだなぁ、と。



そして、器官の検出の手法って、トラッキングとニアリーのようで。



器官の追跡は、ただのオプティカルフロートラッキングではなくて、顔に適した幾何学的制約を設けて推定するアプローチが基本みたい。
よく聞くAAM(Active Appearance Models)は、ある特徴点群の配置を基本形状として、その基本形状からのAppearance(見え方)の変化(歪み)を表現したモデル。
ある人の顔をAAMでモデル化しておくと、その人の表情変化した顔に対して顔の見え方(Appearance)がどのように変化した(歪んだ)かを知る事ができる。
AAMの構造はシンプルで、顔の形(shape)と見え方(appearance)がそれぞれ単純な線形結合として表現されている。

【チュートリアル】 Active Appearace Models(入門編)
Iain Matthews:映画Avatarの顔表情キャプチャシステムを開発した研究者

関連記事

Rerun:マルチモーダルデータの可視化アプリとSDK

NeRF (Neural Radiance Fields):...

SegNet:ディープラーニングによるSemantic Se...

PeopleSansPeople:機械学習用の人物データをU...

Kornia:微分可能なコンピュータービジョンライブラリ

SDカードサイズのコンピューター『Intel Edison』

オープンソースの顔の動作解析ツールキット『OpenFace』

OpenCVの超解像(SuperResolution)モジュ...

海外ドラマのChromaKey

Alice Vision:オープンソースのPhotogram...

Qlone:スマホのカメラで3Dスキャンできるアプリ

OpenCVで動画の手ぶれ補正

PyTorch3D:3Dコンピュータービジョンライブラリ

Google製オープンソース機械学習ライブラリ『Tensor...

VGGT:マルチビュー・フィードフォワード型3Dビジョン基盤...

画像生成AI Stable Diffusionで遊ぶ

MVStudio:オープンソースのPhotogrammetr...

BlenderProc:Blenderで機械学習用の画像デー...

Kubric:機械学習用アノテーション付き動画生成パイプライ...

Multi-View Environment:複数画像から3...

GoogleのDeep Learning論文

2D→3D復元技術で使われる用語まとめ

Mask R-CNN:ディープラーニングによる一般物体検出・...

統計的な顔モデル

Paul Debevec

写真から3Dメッシュの生成・編集ができる無料ツール『Auto...

OpenCVのfindEssentialMat関数を使ったサ...

3Dスキャンに基づくプロシージャルフェイシャルアニメーション

コンピュータビジョンの技術マップ

OpenCV 3.1のsfmモジュールを試す

Adobeの手振れ補正機能『ワープスタビライザー』の秘密

CGAN (Conditional GAN):条件付き敵対的...

顔画像処理技術の過去の研究

SSII 2014 デモンストレーションセッションのダイジェ...

ニューラルネットワークで画像分類

Regard3D:オープンソースのStructure fro...

PSPNet (Pyramid Scene Parsing ...

オープンソースの顔認識フレームワーク『OpenBR』

SSII2014 チュートリアル講演会の資料

OpenCVでiPhone6sのカメラをキャリブレーションす...

機械学習について最近知った情報

Googleが画像解析旅行ガイドアプリのJetpac社を買収

コメント