Active Appearance Models(AAM)

勉強のためのメモ。
最近こちらの資料を見ていて、顔の器官を検出する手法っていっぱい研究されてるんだなぁ、と。



そして、器官の検出の手法って、トラッキングとニアリーのようで。



器官の追跡は、ただのオプティカルフロートラッキングではなくて、顔に適した幾何学的制約を設けて推定するアプローチが基本みたい。
よく聞くAAM(Active Appearance Models)は、ある特徴点群の配置を基本形状として、その基本形状からのAppearance(見え方)の変化(歪み)を表現したモデル。
ある人の顔をAAMでモデル化しておくと、その人の表情変化した顔に対して顔の見え方(Appearance)がどのように変化した(歪んだ)かを知る事ができる。
AAMの構造はシンプルで、顔の形(shape)と見え方(appearance)がそれぞれ単純な線形結合として表現されている。

【チュートリアル】 Active Appearace Models(入門編)
Iain Matthews:映画Avatarの顔表情キャプチャシステムを開発した研究者

関連記事

Regard3D:オープンソースのStructure fro...

Leap MotionでMaya上のオブジェクトを操作できる...

fSpy:1枚の写真からカメラパラメーターを割り出すツール

Photogrammetry (写真測量法)

疑似3D写真が撮れるiPhoneアプリ『Seene』がアップ...

ニューラルネットワークと深層学習

YOLO (You Only Look Once):ディープ...

写真に3Dオブジェクトを違和感無く合成する『3DPhotoM...

3D復元技術の情報リンク集

TeleSculptor:空撮動画からPhotogramme...

OpenCV 3.1とopencv_contribモジュール...

iPhoneで3D写真が撮れるアプリ『seene』

NeRF (Neural Radiance Fields):...

DUSt3R:3Dコンピュータービジョンの基盤モデル

BlenderProc:Blenderで機械学習用の画像デー...

Faceshiftで表情をキャプチャしてBlender上でM...

SSII2014 チュートリアル講演会の資料

Adobeの手振れ補正機能『ワープスタビライザー』の秘密

Point Cloud Libraryに動画フォーマットが追...

PSPNet (Pyramid Scene Parsing ...

OpenGVのライブラリ構成

OpenMVS:Multi-View Stereoによる3次...

Alice Vision:オープンソースのPhotogram...

写真から3Dメッシュの生成・編集ができる無料ツール『Auto...

BlenderでPhotogrammetryできるアドオン

ベイズ推定とグラフィカルモデル

Qlone:スマホのカメラで3Dスキャンできるアプリ

Structure from Motion (多視点画像から...

Kubric:機械学習用アノテーション付き動画生成パイプライ...

オープンソースのロボットアプリケーションフレームワーク『RO...

OpenCVでPhotoshopのプラグイン開発

U-Net:ディープラーニングによるSemantic Seg...

TorchStudio:PyTorchのための統合開発環境と...

cvui:OpenCVのための軽量GUIライブラリ

Faster R-CNN:ディープラーニングによる一般物体検...

Mask R-CNN:ディープラーニングによる一般物体検出・...

Rerun:マルチモーダルデータの可視化アプリとSDK

続・ディープラーニングの資料

Theia:オープンソースのStructure from M...

「ベンジャミン·バトン数奇な人生」でどうやってCGの顔を作っ...

GAN (Generative Adversarial Ne...

viser:Pythonで使える3D可視化ライブラリ

コメント