カーネギーメロン大学が開発している、顔画像から個人を識別するフレームワークOpenFaceと同じ名前で混乱しますが、
ケンブリッジ大学 Multicomp groupが開発しているOpenFaceという全く別のツールキットがあります。こちらは、顔検出、ランドマーク検出、頭の姿勢推定、表情変化の認識、視線推定などをリアルタイムに行うもの。
Copyright.txtによると、アカデミックまたは非商用に限り利用可能だそうです。商用利用は不可。
OpenFace: an open source facial behavior analysis toolkit
OpenFaceは、コンピュータビジョン・機械学習の研究者、情緒的コンピューティングのコミュニティ、顔の動作・表情の変化を用いたインタラクティブなアプリケーションの開発者を対象としたツールです。
OpenFaceは、顔のランドマーク検出、頭の姿勢推定、顔のAction Unitの認識、視線推定が可能な最初のツールキットです。OpenFaceのコアとなるコンピュータビジョンアルゴリズムは、上記のタスクすべてでstate-of-the-artな結果を示しています。
さらに、OpenFaceはリアルタイムに動作し、普通のウェブカメラで実行できます。特別なハードウェアは必要ありません。
Dockerfileもありますね。
公式Wikiはこちら↓
https://github.com/TadasBaltrusaitis/OpenFace/wiki
このツールキットの前身はCLM-framework(Cambridge face tracker)というフレームワークだったようです。↓
https://github.com/TadasBaltrusaitis/CLM-framework
YouTubeで公開されているデモ動画もCLM-framework時代のもの。
顔のAction Unitって概念、そういえばKinect SDKの顔認識機能でもあったな。FACS(Facial Action Coding System)の考えがベースだろうか。
関連記事
GoB：ZBrushとBlenderを連携させるアドオン
NeuralNetwork.NET：.NETで使えるTens...
Polyscope：3Dデータ操作用GUIライブラリ
FacebookがDeep learningツールの一部をオ...
AR (Augmented Reality)とDR (Dim...
Unityで画面タッチ・ジェスチャ入力を扱う無料Asset『...
MVStudio：オープンソースのPhotogrammetr...
TeleSculptor：空撮動画からPhotogramme...
HD画質の無駄遣い
書籍『イラストで学ぶ ディープラーニング』
ポリゴン用各種イテレータと関数セット
参考書
Raspberry PiのGPIOを操作するPythonライ...
Leap MotionでMaya上のオブジェクトを操作できる...
シフトカーを改造してラジコン化する人達
今年もSSII
MLDemos：機械学習について理解するための可視化ツール
Autodesk Mementoでゴジラを3次元復元する
Google製オープンソース機械学習ライブラリ『Tensor...
OpenCVの超解像(SuperResolution)モジュ...
CNN Explainer：畳み込みニューラルネットワーク可...
OpenCVでカメラ画像から自己位置認識 (Visual O...
3DCG Meetup #4に行ってきた
CGレンダラ研究開発のためのフレームワーク『Lightmet...
OpenCV バージョン4がリリースされた！
VCG Library：C++のポリゴン操作ライブラリ
SONY製のニューラルネットワークライブラリ『NNabla』
PyMC：Pythonのベイズ統計ライブラリ
MeshroomでPhotogrammetry
Unity ARKitプラグインサンプルのドキュメントを読む
機械学習手法『Random Forest』
TensorFlowでCGを微分できる『TensorFlow...
Unityで強化学習できる『Unity ML-Agents』
Alice Vision：オープンソースのPhotogram...
CGのためのディープラーニング
3Dグラフィックスの入門書
clearcoat Shader
Point Cloud Utils：Pythonで3D点群・...
OpenMVSのサンプルを動かしてみる
UnityでARKit2.0
NumSharp：C#で使えるNumPyライクな数値計算ライ...
Mitsuba 2：オープンソースの物理ベースレンダラ
コメント