Active Appearance Models(AAM)

勉強のためのメモ。
最近こちらの資料を見ていて、顔の器官を検出する手法っていっぱい研究されてるんだなぁ、と。



そして、器官の検出の手法って、トラッキングとニアリーのようで。



器官の追跡は、ただのオプティカルフロートラッキングではなくて、顔に適した幾何学的制約を設けて推定するアプローチが基本みたい。
よく聞くAAM(Active Appearance Models)は、ある特徴点群の配置を基本形状として、その基本形状からのAppearance(見え方)の変化(歪み)を表現したモデル。
ある人の顔をAAMでモデル化しておくと、その人の表情変化した顔に対して顔の見え方(Appearance)がどのように変化した(歪んだ)かを知る事ができる。
AAMの構造はシンプルで、顔の形(shape)と見え方(appearance)がそれぞれ単純な線形結合として表現されている。

【チュートリアル】 Active Appearace Models(入門編)
Iain Matthews:映画Avatarの顔表情キャプチャシステムを開発した研究者

関連記事

YOLO (You Only Look Once):ディープラーニングによる一般物体検出手法

cvui:OpenCVのための軽量GUIライブラリ

Photogrammetry (写真測量法)

OpenCVでiPhone6sのカメラをキャリブレーションする

Point Cloud Libraryに動画フォーマットが追加されるらしい

3D Gaussian Splatting:リアルタイム描画できるRadiance Fields

CGAN (Conditional GAN):条件付き敵対的生成ネットワーク

Kinect for Windows v2の日本価格決定

Structure from Motion (多視点画像からの3次元形状復元)

OpenCV 3.3.0 contribのsfmモジュールのサンプルを動かしてみる

viser:Pythonで使える3D可視化ライブラリ

openMVG:複数視点画像から3次元形状を復元するライブラリ

AfterEffectsプラグイン開発

U-Net:ディープラーニングによるSemantic Segmentation手法

今年もSSII

OpenGVのライブラリ構成

ポイントクラウドコンソーシアム

R-CNN (Regions with CNN features):ディープラーニングによる一般物体...

CGのためのディープラーニング

オープンソースの顔認識フレームワーク『OpenBR』

写真から3Dメッシュの生成・編集ができる無料ツール『Autodesk Memento』

COLMAP:オープンソースのSfM・MVSツール

OpenCVで平均顔を作るチュートリアル

Facebookの顔認証技術『DeepFace』

TensorFlowでCGを微分できる『TensorFlow Graphics』

MVStudio:オープンソースのPhotogrammetryツール

RefineNet (Multi-Path Refinement Network):ディープラーニン...

UnityでPoint Cloudを表示する方法

OpenCVの顔検出過程を可視化した動画

SSD (Single Shot Multibox Detector):ディープラーニングによる一般...

3Dスキャンに基づくプロシージャルフェイシャルアニメーション

Kubric:機械学習用アノテーション付き動画生成パイプライン

Dlib:C++の機械学習ライブラリ

Kornia:微分可能なコンピュータービジョンライブラリ

CycleGAN:ドメイン関係を学習した画像変換

Mask R-CNN:ディープラーニングによる一般物体検出・Instance Segmentatio...

Caffe:読みやすくて高速なディープラーニングのフレームワーク

Theia:オープンソースのStructure from Motionライブラリ

Cartographer:オープンソースのSLAMライブラリ

ニューラルネットワークで画像分類

Google製オープンソース機械学習ライブラリ『TensorFlow』のWindows版が公開された

OpenMVSのサンプルを動かしてみる

コメント