Active Appearance Models(AAM)

勉強のためのメモ。
最近こちらの資料を見ていて、顔の器官を検出する手法っていっぱい研究されてるんだなぁ、と。



そして、器官の検出の手法って、トラッキングとニアリーのようで。



器官の追跡は、ただのオプティカルフロートラッキングではなくて、顔に適した幾何学的制約を設けて推定するアプローチが基本みたい。
よく聞くAAM(Active Appearance Models)は、ある特徴点群の配置を基本形状として、その基本形状からのAppearance(見え方)の変化(歪み)を表現したモデル。
ある人の顔をAAMでモデル化しておくと、その人の表情変化した顔に対して顔の見え方(Appearance)がどのように変化した(歪んだ)かを知る事ができる。
AAMの構造はシンプルで、顔の形(shape)と見え方(appearance)がそれぞれ単純な線形結合として表現されている。

【チュートリアル】 Active Appearace Models(入門編)
Iain Matthews:映画Avatarの顔表情キャプチャシステムを開発した研究者

関連記事

海外ドラマのChromaKey

OpenCVで平均顔を作るチュートリアル

池袋パルコで3Dのバーチャルフィッティング『ウェアラブル クロージング バイ アーバンリサーチ』

BGSLibrary:OpenCVベースの背景差分ライブラリ

Runway ML:クリエイターのための機械学習ツール

機械学習手法『Random Forest』

Leap MotionでMaya上のオブジェクトを操作できるプラグイン

OpenCV バージョン4がリリースされた!

Paul Debevec

YOLO (You Only Look Once):ディープラーニングによる一般物体検出手法

OpenCV3.3.0でsfmモジュールのビルドに成功!

コンピュータビジョンの技術マップ

TeleSculptor:空撮動画からPhotogrammetryするツール

OpenAR:OpenCVベースのマーカーARライブラリ

SSII 2014 デモンストレーションセッションのダイジェスト動画

OpenCVでPhotoshopのプラグイン開発

オープンソースの顔の動作解析ツールキット『OpenFace』

ポイントクラウドコンソーシアム

顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト

RefineNet (Multi-Path Refinement Network):ディープラーニン...

Faster R-CNN:ディープラーニングによる一般物体検出手法

顔画像処理技術の過去の研究

OpenGV:画像からカメラの3次元位置・姿勢を推定するライブラリ

OpenCV

Kubric:機械学習用アノテーション付き動画生成パイプライン

PCA (主成分分析)

Dlib:C++の機械学習ライブラリ

Kornia:微分可能なコンピュータービジョンライブラリ

顔追跡による擬似3D表示『Dynamic Perspective』

OpenCVでiPhone6sのカメラをキャリブレーションする

FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ

GAN (Generative Adversarial Networks):敵対的生成ネットワーク

OpenCV 3.3.0-RCでsfmモジュールをビルド

Iridescence:プロトタイピング向け軽量3D可視化ライブラリ

DCGAN (Deep Convolutional GAN):畳み込みニューラルネットワークによる敵...

Multi-View Environment:複数画像から3次元形状を再構築するライブラリ

fSpy:1枚の写真からカメラパラメーターを割り出すツール

Structure from Motion (多視点画像からの3次元形状復元)

OpenCVでカメラ画像から自己位置認識 (Visual Odometry)

iPhoneで3D写真が撮れるアプリ『seene』

UnrealCV:コンピュータビジョン研究のためのUnreal Engineプラグイン

Qlone:スマホのカメラで3Dスキャンできるアプリ

コメント