顔画像処理技術の過去の研究

最近、コンピュータビジョンの歴史を追いかけています。KinectとかIntel Real Senseでも当然のようにSDKに搭載されている顔認識系技術だけど、そのバックグラウンドを知りたいのだ。

2009年までのまとめ↓
顔画像処理技術の研究動向と応用事例

顔画像処理技術

顔検出

画像の中から漏れなく誤りなくリアルタイムで顔の位置を検出する技術。動画処理時にはトラッキングも必要。
ViolaとJonesによるHaarタイプの特徴量を用いた高速顔検出手法をベースとして多くの改善手法が提案されている。

顔特徴点検出

顔の性別、年齢を含めた属性推定や個人識別を行うために、顔の各器官の特徴点の検出を行う技術。
多種特徴点抽出に対応したCootesらのActive Shape Model(ASM)やActive Appearance Model(AAM)が有名。拡張・改良に関する提案多数。

顔認識

検出された顔特徴点位置に基づき、個人を特定するための個人特徴量を生成する技術。
検出された特徴点間の配置の関係や特徴点付近のローカルな特徴記述子に基づくFeature-basedアプローチと、顔全体の輝度情報に基づき各特徴点を3次元的に正規化した顔パタンの抽出を行うAppearance-basedアプローチに分けられる。

顔属性・表情推定技術

顔から性別、年齢などの属性を推定する技術、顔の向きや視線を測定する技術、顔の表情を推定する技術。

それ以後から急速に発展してたりして…

関連記事

OpenCV 3.1から追加されたSfMモジュール

Pix2Pix:CGANによる画像変換

FCN (Fully Convolutional Network):ディープラーニングによるSema...

Faster R-CNN:ディープラーニングによる一般物体検出手法

SegNet:ディープラーニングによるSemantic Segmentation手法

Google製オープンソース機械学習ライブラリ『TensorFlow』のWindows版が公開された

OpenCV 3.1のsfmモジュールのビルド再び

BlenderでPhotogrammetryできるアドオン

画像認識による位置情報取得 - Semi-Direct Monocular Visual Odome...

PeopleSansPeople:機械学習用の人物データをUnityで生成する

iPhoneで3D写真が撮れるアプリ『seene』

ポリ男をリファイン

オープンソースの顔認識フレームワーク『OpenBR』

AR (Augmented Reality)とDR (Diminished Reality)

NeRF (Neural Radiance Fields):深層学習による新規視点合成

U-Net:ディープラーニングによるSemantic Segmentation手法

GAN (Generative Adversarial Networks):敵対的生成ネットワーク

GoogleのDeep Learning論文

RefineNet (Multi-Path Refinement Network):ディープラーニン...

Blendify:コンピュータービジョン向けBlenderラッパー

「ベンジャミン·バトン数奇な人生」でどうやってCGの顔を作ったのか

OpenFace:Deep Neural Networkによる顔の個人識別フレームワーク

OpenAR:OpenCVベースのマーカーARライブラリ

cvui:OpenCVのための軽量GUIライブラリ

Kubric:機械学習用アノテーション付き動画生成パイプライン

FacebookがDeep learningツールの一部をオープンソース化

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

OpenMVS:Multi-View Stereoによる3次元復元ライブラリ

ArUco:OpenCVベースのコンパクトなARライブラリ

TensorSpace.js:ニューラルネットワークの構造を可視化するフレームワーク

Qlone:スマホのカメラで3Dスキャンできるアプリ

SDカードサイズのコンピューター『Intel Edison』

第1回 3D勉強会@関東『SLAMチュートリアル大会』

hloc:SuperGlueで精度を向上させたSfM・Visual Localization

OpenCV 3.1のsfmモジュールを試す

iPadをハンディ3Dスキャナにするガジェット『iSense 3D Scanner』

Theia:オープンソースのStructure from Motionライブラリ

Regard3D:オープンソースのStructure from Motionツール

池袋パルコで3Dのバーチャルフィッティング『ウェアラブル クロージング バイ アーバンリサーチ』

『ローグ・ワン/スター・ウォーズ・ストーリー』"あのキャラクター"のメイキング

機械学習手法『Random Forest』

続・ディープラーニングの資料

コメント