Active Appearance Models(AAM)

勉強のためのメモ。
最近こちらの資料を見ていて、顔の器官を検出する手法っていっぱい研究されてるんだなぁ、と。



そして、器官の検出の手法って、トラッキングとニアリーのようで。



器官の追跡は、ただのオプティカルフロートラッキングではなくて、顔に適した幾何学的制約を設けて推定するアプローチが基本みたい。
よく聞くAAM(Active Appearance Models)は、ある特徴点群の配置を基本形状として、その基本形状からのAppearance(見え方)の変化(歪み)を表現したモデル。
ある人の顔をAAMでモデル化しておくと、その人の表情変化した顔に対して顔の見え方(Appearance)がどのように変化した(歪んだ)かを知る事ができる。
AAMの構造はシンプルで、顔の形(shape)と見え方(appearance)がそれぞれ単純な線形結合として表現されている。

【チュートリアル】 Active Appearace Models(入門編)
Iain Matthews:映画Avatarの顔表情キャプチャシステムを開発した研究者

関連記事

Live CV:インタラクティブにComputer Visionコーディングができるツール

Super Resolution:OpenCVの超解像処理モジュール

CNN Explainer:畳み込みニューラルネットワーク可視化ツール

AR (Augmented Reality)とDR (Diminished Reality)

viser:Pythonで使える3D可視化ライブラリ

書籍『イラストで学ぶ ディープラーニング』

SDカードサイズのコンピューター『Intel Edison』

SSII2014 チュートリアル講演会の資料

PeopleSansPeople:機械学習用の人物データをUnityで生成する

読みやすくて高速なディープラーニングのフレームワーク『Caffe』

Faster R-CNN:ディープラーニングによる一般物体検出手法

OpenCV バージョン4がリリースされた!

Cartographer:オープンソースのSLAMライブラリ

hloc:SuperGlueで精度を向上させたSfM実装

OpenGV:画像からカメラの3次元位置・姿勢を推定するライブラリ

画像認識による位置情報取得 - Semi-Direct Monocular Visual Odome...

COLMAP:オープンソースのSfM・MVSツール

Pix2Pix:CGANによる画像変換

BlenderProc:Blenderで機械学習用の画像データを生成するPythonツール

R-CNN (Regions with CNN features):ディープラーニングによる一般物体...

UnityでPoint Cloudを表示する方法

Theia:オープンソースのStructure from Motionライブラリ

Regard3D:オープンソースのStructure from Motionツール

今年もSSII

CGのためのディープラーニング

YOLO (You Only Look Once):ディープラーニングによる一般物体検出手法

OpenCV 3.1のsfmモジュールを試す

Iridescence:プロトタイピング向け軽量3D可視化ライブラリ

OpenFace:Deep Neural Networkによる顔の個人識別フレームワーク

Dlib:C++の機械学習ライブラリ

iPhoneで3D写真が撮れるアプリ『seene』

UnrealCV:コンピュータビジョン研究のためのUnreal Engineプラグイン

Alice Vision:オープンソースのPhotogrammetryフレームワーク

NeRF (Neural Radiance Fields):深層学習による新規視点合成

TensorSpace.js:ニューラルネットワークの構造を可視化するフレームワーク

Rerun:マルチモーダルデータの可視化アプリとSDK

OpenMVSのサンプルを動かしてみる

OpenCV 3.1のsfmモジュールのビルド再び

PyTorch3D:3Dコンピュータービジョンライブラリ

オープンソースの顔認識フレームワーク『OpenBR』

Leap MotionでMaya上のオブジェクトを操作できるプラグイン

OpenCVでカメラ画像から自己位置認識 (Visual Odometry)

コメント