Active Appearance Models(AAM)

勉強のためのメモ。
最近こちらの資料を見ていて、顔の器官を検出する手法っていっぱい研究されてるんだなぁ、と。



そして、器官の検出の手法って、トラッキングとニアリーのようで。



器官の追跡は、ただのオプティカルフロートラッキングではなくて、顔に適した幾何学的制約を設けて推定するアプローチが基本みたい。
よく聞くAAM(Active Appearance Models)は、ある特徴点群の配置を基本形状として、その基本形状からのAppearance(見え方)の変化(歪み)を表現したモデル。
ある人の顔をAAMでモデル化しておくと、その人の表情変化した顔に対して顔の見え方(Appearance)がどのように変化した(歪んだ)かを知る事ができる。
AAMの構造はシンプルで、顔の形(shape)と見え方(appearance)がそれぞれ単純な線形結合として表現されている。

【チュートリアル】 Active Appearace Models(入門編)
Iain Matthews:映画Avatarの顔表情キャプチャシステムを開発した研究者

関連記事

Faster R-CNN:ディープラーニングによる一般物体検出手法

SSII2014 チュートリアル講演会の資料

iPadをハンディ3Dスキャナにするガジェット『iSense 3D Scanner』

Fast R-CNN:ディープラーニングによる一般物体検出手法

Runway ML:クリエイターのための機械学習ツール

Facebookの顔認証技術『DeepFace』

ニューラルネットワークで画像分類

viser:Pythonで使える3D可視化ライブラリ

Photogrammetry (写真測量法)

Regard3D:オープンソースのStructure from Motionツール

TorchStudio:PyTorchのための統合開発環境とエコシステム

3D復元技術の情報リンク集

FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ

統計的な顔モデル

Kubric:機械学習用アノテーション付き動画生成パイプライン

OpenCV 3.3.0 contribのsfmモジュールのサンプルを動かしてみる

Adobeの手振れ補正機能『ワープスタビライザー』の秘密

OpenMVSのサンプルを動かしてみる

オープンソースの顔認識フレームワーク『OpenBR』

Faceshiftで表情をキャプチャしてBlender上でMakeHumanのメッシュを動かすデモ

海外ドラマのChromaKey

写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

OpenCV 3.1のsfmモジュールを試す

Theia:オープンソースのStructure from Motionライブラリ

書籍『イラストで学ぶ ディープラーニング』

ニューラルネットワークと深層学習

Multi-View Environment:複数画像から3次元形状を再構築するライブラリ

U-Net:ディープラーニングによるSemantic Segmentation手法

Autodesk Mementoでゴジラを3次元復元する

OpenCVのバージョン3が正式リリースされたぞ

UnityでOpenCVを使うには?

Mask R-CNN:ディープラーニングによる一般物体検出・Instance Segmentatio...

MVStudio:オープンソースのPhotogrammetryツール

OpenAR:OpenCVベースのマーカーARライブラリ

顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト

BlenderProc:Blenderで機械学習用の画像データを生成するPythonツール

OpenCV

OpenCV3.3.0でsfmモジュールのビルドに成功!

OpenCVでiPhone6sのカメラをキャリブレーションする

コンピュータビジョンの技術マップ

UnityでPoint Cloudを表示する方法

SSII 2014 デモンストレーションセッションのダイジェスト動画

コメント