Active Appearance Models(AAM)

勉強のためのメモ。
最近こちらの資料を見ていて、顔の器官を検出する手法っていっぱい研究されてるんだなぁ、と。



そして、器官の検出の手法って、トラッキングとニアリーのようで。



器官の追跡は、ただのオプティカルフロートラッキングではなくて、顔に適した幾何学的制約を設けて推定するアプローチが基本みたい。
よく聞くAAM(Active Appearance Models)は、ある特徴点群の配置を基本形状として、その基本形状からのAppearance(見え方)の変化(歪み)を表現したモデル。
ある人の顔をAAMでモデル化しておくと、その人の表情変化した顔に対して顔の見え方(Appearance)がどのように変化した(歪んだ)かを知る事ができる。
AAMの構造はシンプルで、顔の形(shape)と見え方(appearance)がそれぞれ単純な線形結合として表現されている。

【チュートリアル】 Active Appearace Models(入門編)
Iain Matthews:映画Avatarの顔表情キャプチャシステムを開発した研究者

関連記事

openMVG:複数視点画像から3次元形状を復元するライブラリ

機械学習について最近知った情報

顔追跡による擬似3D表示『Dynamic Perspective』

OpenGVのライブラリ構成

ArUco:OpenCVベースのコンパクトなARライブラリ

Kubric:機械学習用アノテーション付き動画生成パイプライン

Leap MotionでMaya上のオブジェクトを操作できるプラグイン

統計的な顔モデル

畳み込みニューラルネットワーク (CNN: Convolutional Neural Network...

Adobe MAX 2015

Kornia:微分可能なコンピュータービジョンライブラリ

OpenCVのfindEssentialMat関数を使ったサンプルを読んでみる

SDカードサイズのコンピューター『Intel Edison』

Point Cloud Libraryに動画フォーマットが追加されるらしい

COLMAP:オープンソースのSfM・MVSツール

Qlone:スマホのカメラで3Dスキャンできるアプリ

OpenCVの顔検出過程を可視化した動画

Cartographer:オープンソースのSLAMライブラリ

Paul Debevec

ニューラルネットワークで画像分類

写真から3Dメッシュの生成・編集ができる無料ツール『Autodesk Memento』

BGSLibrary:OpenCVベースの背景差分ライブラリ

顔画像処理技術の過去の研究

OpenCVでカメラ画像から自己位置認識 (Visual Odometry)

オープンソースの顔認識フレームワーク『OpenBR』

PSPNet (Pyramid Scene Parsing Network):ディープラーニングによ...

FacebookがDeep learningツールの一部をオープンソース化

BlenderProc:Blenderで機械学習用の画像データを生成するPythonツール

RefineNet (Multi-Path Refinement Network):ディープラーニン...

「ベンジャミン·バトン数奇な人生」でどうやってCGの顔を作ったのか

Blendify:コンピュータービジョン向けBlenderラッパー

Autodesk Mementoでゴジラを3次元復元する

Photogrammetry (写真測量法)

MVStudio:オープンソースのPhotogrammetryツール

viser:Pythonで使える3D可視化ライブラリ

顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト

SSD (Single Shot Multibox Detector):ディープラーニングによる一般...

Open3D:3Dデータ処理ライブラリ

OpenCVで顔のランドマークを検出する『Facemark API』

Kinect for Windows V2のプレオーダー開始

第25回コンピュータビジョン勉強会@関東に行って来た

海外ドラマのChromaKey

コメント