カーネギーメロン大学が開発している、顔画像から個人を識別するフレームワークOpenFaceと同じ名前で混乱しますが、
ケンブリッジ大学 Multicomp groupが開発しているOpenFaceという全く別のツールキットがあります。こちらは、顔検出、ランドマーク検出、頭の姿勢推定、表情変化の認識、視線推定などをリアルタイムに行うもの。
Copyright.txtによると、アカデミックまたは非商用に限り利用可能だそうです。商用利用は不可。
OpenFace: an open source facial behavior analysis toolkit
OpenFaceは、コンピュータビジョン・機械学習の研究者、情緒的コンピューティングのコミュニティ、顔の動作・表情の変化を用いたインタラクティブなアプリケーションの開発者を対象としたツールです。
OpenFaceは、顔のランドマーク検出、頭の姿勢推定、顔のAction Unitの認識、視線推定が可能な最初のツールキットです。OpenFaceのコアとなるコンピュータビジョンアルゴリズムは、上記のタスクすべてでstate-of-the-artな結果を示しています。
さらに、OpenFaceはリアルタイムに動作し、普通のウェブカメラで実行できます。特別なハードウェアは必要ありません。
Dockerfileもありますね。
公式Wikiはこちら↓
https://github.com/TadasBaltrusaitis/OpenFace/wiki
このツールキットの前身はCLM-framework(Cambridge face tracker)というフレームワークだったようです。↓
https://github.com/TadasBaltrusaitis/CLM-framework
YouTubeで公開されているデモ動画もCLM-framework時代のもの。
顔のAction Unitって概念、そういえばKinect SDKの顔認識機能でもあったな。FACS(Facial Action Coding System)の考えがベースだろうか。
関連記事
OpenCVのfindEssentialMat関数を使ったサ...
MeshroomでPhotogrammetry
TensorFlowでCGを微分できる『TensorFlow...
YOLO (You Only Look Once)：ディープ...
Point Cloud Utils：Pythonで3D点群・...
UnityのTransformクラスについて調べてみた
ドラマ『ファーストクラス』のモーショングラフィックス
Google App EngineでWordPress
MPFB2：Blenderの人体モデリングアドオン
OpenVDB：3Dボリュームデータ処理ライブラリ
Deep Learningとその他の機械学習手法の性能比較
OpenCV 3.1とopencv_contribモジュール...
OpenGVの用語
HD画質の無駄遣い その２
クラスの基本
TorchStudio：PyTorchのための統合開発環境と...
フィクションに登場するUIデザインのまとめサイト
GoB：ZBrushとBlenderを連携させるアドオン
自前のShaderがおかしい件
PSPNet (Pyramid Scene Parsing ...
Python2とPython3
タマムシっぽい質感
書籍『仕事ではじめる機械学習』を読みました
fSpy：1枚の写真からカメラパラメーターを割り出すツール
BlenderProc：Blenderで機械学習用の画像デー...
統計的な顔モデル
Raspberry Piでセンサーの常時稼働を検討する
CGレンダラ研究開発のためのフレームワーク『Lightmet...
海外ドラマのChromaKey
OpenCV 3.1から追加されたSfMモジュール
1枚の画像からマテリアルを作成できる無料ツール『Materi...
Digital Emily Project：人間の顔をそっく...
『手を動かしながら学ぶエンジニアのためのデータサイエンス』ハ...
OpenCVで平均顔を作るチュートリアル
pythonもかじってみようかと
PyMC：Pythonのベイズ統計ライブラリ
ニューラルネットワークで画像分類
Boost オープンソースライブラリ
写真から3Dメッシュの生成・編集ができる無料ツール『Auto...
Open Shading Language (OSL)
Mitsuba 2：オープンソースの物理ベースレンダラ
Google XML Sitemap Generatorプラ...
コメント