Active Appearance Models(AAM)

勉強のためのメモ。
最近こちらの資料を見ていて、顔の器官を検出する手法っていっぱい研究されてるんだなぁ、と。



そして、器官の検出の手法って、トラッキングとニアリーのようで。



器官の追跡は、ただのオプティカルフロートラッキングではなくて、顔に適した幾何学的制約を設けて推定するアプローチが基本みたい。
よく聞くAAM(Active Appearance Models)は、ある特徴点群の配置を基本形状として、その基本形状からのAppearance(見え方)の変化(歪み)を表現したモデル。
ある人の顔をAAMでモデル化しておくと、その人の表情変化した顔に対して顔の見え方(Appearance)がどのように変化した(歪んだ)かを知る事ができる。
AAMの構造はシンプルで、顔の形(shape)と見え方(appearance)がそれぞれ単純な線形結合として表現されている。

【チュートリアル】 Active Appearace Models(入門編)
Iain Matthews:映画Avatarの顔表情キャプチャシステムを開発した研究者

関連記事

ArUco:OpenCVベースのコンパクトなARライブラリ

OpenGVのライブラリ構成

Qlone:スマホのカメラで3Dスキャンできるアプリ

Leap MotionでMaya上のオブジェクトを操作できる...

顔追跡による擬似3D表示『Dynamic Perspecti...

OpenCVで平均顔を作るチュートリアル

U-Net:ディープラーニングによるSemantic Seg...

Faceshiftで表情をキャプチャしてBlender上でM...

画像生成AI Stable Diffusionで遊ぶ

統計的な顔モデル

Open3D:3Dデータ処理ライブラリ

Composition Rendering:Blenderに...

第1回 3D勉強会@関東『SLAMチュートリアル大会』

TeleSculptor:空撮動画からPhotogramme...

3D Gaussian Splatting:リアルタイム描画...

MVStudio:オープンソースのPhotogrammetr...

TorchStudio:PyTorchのための統合開発環境と...

FacebookがDeep learningツールの一部をオ...

OpenCV 3.1のsfmモジュールを試す

Point Cloud Consortiumのセミナー「3D...

Mask R-CNN:ディープラーニングによる一般物体検出・...

OpenCVで動画の手ぶれ補正

海外ドラマのChromaKey

3Dスキャンに基づくプロシージャルフェイシャルアニメーション

OpenMVS:Multi-View Stereoによる3次...

UnityでPoint Cloudを表示する方法

Adobe MAX 2015

openMVG:複数視点画像から3次元形状を復元するライブラ...

cvui:OpenCVのための軽量GUIライブラリ

Dlib:C++の機械学習ライブラリ

Pix2Pix:CGANによる画像変換

畳み込みニューラルネットワーク (CNN: Convolut...

iPadをハンディ3Dスキャナにするガジェット『iSense...

PeopleSansPeople:機械学習用の人物データをU...

Google Colaboratoryで遊ぶ準備

BlenderProc:Blenderで機械学習用の画像デー...

Facebookの顔認証技術『DeepFace』

オープンソースの顔認識フレームワーク『OpenBR』

GAN (Generative Adversarial Ne...

OpenMVSのサンプルを動かしてみる

OpenCVのバージョン3が正式リリースされたぞ

Runway ML:クリエイターのための機械学習ツール

コメント