顔画像処理技術の過去の研究

最近、コンピュータビジョンの歴史を追いかけています。KinectとかIntel Real Senseでも当然のようにSDKに搭載されている顔認識系技術だけど、そのバックグラウンドを知りたいのだ。

2009年までのまとめ↓
顔画像処理技術の研究動向と応用事例

顔画像処理技術

顔検出

画像の中から漏れなく誤りなくリアルタイムで顔の位置を検出する技術。動画処理時にはトラッキングも必要。
ViolaとJonesによるHaarタイプの特徴量を用いた高速顔検出手法をベースとして多くの改善手法が提案されている。

顔特徴点検出

顔の性別、年齢を含めた属性推定や個人識別を行うために、顔の各器官の特徴点の検出を行う技術。
多種特徴点抽出に対応したCootesらのActive Shape Model(ASM)やActive Appearance Model(AAM)が有名。拡張・改良に関する提案多数。

顔認識

検出された顔特徴点位置に基づき、個人を特定するための個人特徴量を生成する技術。
検出された特徴点間の配置の関係や特徴点付近のローカルな特徴記述子に基づくFeature-basedアプローチと、顔全体の輝度情報に基づき各特徴点を3次元的に正規化した顔パタンの抽出を行うAppearance-basedアプローチに分けられる。

顔属性・表情推定技術

顔から性別、年齢などの属性を推定する技術、顔の向きや視線を測定する技術、顔の表情を推定する技術。

それ以後から急速に発展してたりして…

関連記事

ポリ男をリファイン

CGAN (Conditional GAN):条件付き敵対的生成ネットワーク

Active Appearance Models(AAM)

畳み込みニューラルネットワーク (CNN: Convolutional Neural Network...

OpenCVで動画の手ぶれ補正

OpenCV 3.1のsfmモジュールのビルド再び

OpenCV 3.1とopencv_contribモジュールをVisual Studio 2015で...

PyTorch3D:3Dコンピュータービジョンライブラリ

Digital Emily Project:人間の顔をそっくりそのままCGで復元する

ニューラルネットワークと深層学習

ポイントクラウドコンソーシアム

Googleが画像解析旅行ガイドアプリのJetpac社を買収

DensePose:画像中の人物表面のUV座標を推定する

3D復元技術の情報リンク集

池袋パルコで3Dのバーチャルフィッティング『ウェアラブル クロージング バイ アーバンリサーチ』

Runway ML:クリエイターのための機械学習ツール

第1回 3D勉強会@関東『SLAMチュートリアル大会』

OpenGVの用語

スクラッチで既存のキャラクターを立体化したい

UnrealCV:コンピュータビジョン研究のためのUnreal Engineプラグイン

openMVG:複数視点画像から3次元形状を復元するライブラリ

Rerun:マルチモーダルデータの可視化アプリとSDK

GoogleのDeep Learning論文

BGSLibrary:OpenCVベースの背景差分ライブラリ

Kornia:微分可能なコンピュータービジョンライブラリ

Leap MotionでMaya上のオブジェクトを操作できるプラグイン

疑似3D写真が撮れるiPhoneアプリ『Seene』がアップデートでついにフル3Dモデルが撮影できる...

cvui:OpenCVのための軽量GUIライブラリ

顔追跡による擬似3D表示『Dynamic Perspective』

3D Gaussian Splatting:リアルタイム描画できるRadiance Fields

R-CNN (Regions with CNN features):ディープラーニングによる一般物体...

顔のモデリング

Qlone:スマホのカメラで3Dスキャンできるアプリ

OpenCVの顔検出過程を可視化した動画

SSII2014 チュートリアル講演会の資料

Fast R-CNN:ディープラーニングによる一般物体検出手法

写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

Iridescence:プロトタイピング向け軽量3D可視化ライブラリ

OpenAR:OpenCVベースのマーカーARライブラリ

SSII 2014 デモンストレーションセッションのダイジェスト動画

SDカードサイズのコンピューター『Intel Edison』

Super Resolution:OpenCVの超解像処理モジュール

コメント