Active Appearance Models(AAM)

勉強のためのメモ。
最近こちらの資料を見ていて、顔の器官を検出する手法っていっぱい研究されてるんだなぁ、と。



そして、器官の検出の手法って、トラッキングとニアリーのようで。



器官の追跡は、ただのオプティカルフロートラッキングではなくて、顔に適した幾何学的制約を設けて推定するアプローチが基本みたい。
よく聞くAAM(Active Appearance Models)は、ある特徴点群の配置を基本形状として、その基本形状からのAppearance(見え方)の変化(歪み)を表現したモデル。
ある人の顔をAAMでモデル化しておくと、その人の表情変化した顔に対して顔の見え方(Appearance)がどのように変化した(歪んだ)かを知る事ができる。
AAMの構造はシンプルで、顔の形(shape)と見え方(appearance)がそれぞれ単純な線形結合として表現されている。

【チュートリアル】 Active Appearace Models(入門編)
Iain Matthews:映画Avatarの顔表情キャプチャシステムを開発した研究者

関連記事

DensePose:画像中の人物表面のUV座標を推定する

Dlib:C++の機械学習ライブラリ

MeshroomでPhotogrammetry

bpy-renderer:レンダリング用Pythonパッケー...

OpenMVSのサンプルを動かしてみる

MVStudio:オープンソースのPhotogrammetr...

Paul Debevec

Runway ML:クリエイターのための機械学習ツール

R-CNN (Regions with CNN featur...

GoogleのDeep Learning論文

ニューラルネットワークと深層学習

「ベンジャミン·バトン数奇な人生」でどうやってCGの顔を作っ...

Pix2Pix:CGANによる画像変換

Adobeの手振れ補正機能『ワープスタビライザー』の秘密

OpenCVのfindEssentialMat関数を使ったサ...

VGGT:マルチビュー・フィードフォワード型3Dビジョン基盤...

RefineNet (Multi-Path Refineme...

Faceshiftで表情をキャプチャしてBlender上でM...

OpenFace:Deep Neural Networkによ...

ディープラーニング

第25回コンピュータビジョン勉強会@関東に行って来た

ArUco:OpenCVベースのコンパクトなARライブラリ

Kinect for Windows V2のプレオーダー開始

FacebookがDeep learningツールの一部をオ...

OpenCVで顔のモーフィングを実装する

hloc:SuperGlueで精度を向上させたSfM・Vis...

顔画像処理技術の過去の研究

OpenMVS:Multi-View Stereoによる3次...

fSpy:1枚の写真からカメラパラメーターを割り出すツール

OpenCV バージョン4がリリースされた!

PSPNet (Pyramid Scene Parsing ...

Photogrammetry (写真測量法)

続・ディープラーニングの資料

オープンソースのロボットアプリケーションフレームワーク『RO...

書籍『OpenCV 3 プログラミングブック』を購入

OpenCV 3.3.0 contribのsfmモジュールの...

DUSt3R:3Dコンピュータービジョンの基盤モデル

TensorSpace.js:ニューラルネットワークの構造を...

viser:Pythonで使える3D可視化ライブラリ

iPhoneで3D写真が撮れるアプリ『seene』

Google製オープンソース機械学習ライブラリ『Tensor...

Kornia:微分可能なコンピュータービジョンライブラリ

コメント