カーネギーメロン大学が開発している、顔画像から個人を識別するフレームワークOpenFaceと同じ名前で混乱しますが、
ケンブリッジ大学 Multicomp groupが開発しているOpenFaceという全く別のツールキットがあります。こちらは、顔検出、ランドマーク検出、頭の姿勢推定、表情変化の認識、視線推定などをリアルタイムに行うもの。
Copyright.txtによると、アカデミックまたは非商用に限り利用可能だそうです。商用利用は不可。
OpenFace: an open source facial behavior analysis toolkit
OpenFaceは、コンピュータビジョン・機械学習の研究者、情緒的コンピューティングのコミュニティ、顔の動作・表情の変化を用いたインタラクティブなアプリケーションの開発者を対象としたツールです。
OpenFaceは、顔のランドマーク検出、頭の姿勢推定、顔のAction Unitの認識、視線推定が可能な最初のツールキットです。OpenFaceのコアとなるコンピュータビジョンアルゴリズムは、上記のタスクすべてでstate-of-the-artな結果を示しています。
さらに、OpenFaceはリアルタイムに動作し、普通のウェブカメラで実行できます。特別なハードウェアは必要ありません。
Dockerfileもありますね。
公式Wikiはこちら↓
https://github.com/TadasBaltrusaitis/OpenFace/wiki
このツールキットの前身はCLM-framework(Cambridge face tracker)というフレームワークだったようです。↓
https://github.com/TadasBaltrusaitis/CLM-framework
YouTubeで公開されているデモ動画もCLM-framework時代のもの。
顔のAction Unitって概念、そういえばKinect SDKの顔認識機能でもあったな。FACS(Facial Action Coding System)の考えがベースだろうか。
関連記事
Unityの薄い本
疑似3D写真が撮れるiPhoneアプリ『Seene』がアップ...
オープンソースのプリント基板設計ツール『KiCad』
Active Appearance Models（AAM）
Managing Software Requirements...
Rerun：マルチモーダルデータの可視化アプリとSDK
ミニ四駆を改造してBluetoothラジコン化する
GoB：ZBrushとBlenderを連携させるアドオン
Unity ARKitプラグインサンプルのチュートリアルを読...
Point Cloud Consortiumのセミナー「3D...
CycleGAN：ドメイン関係を学習した画像変換
BlenderでPhotogrammetryできるアドオン
ポイントクラウドコンソーシアム
OpenCVでiPhone6sのカメラをキャリブレーションす...
PCA (主成分分析)
WordPressプラグインの作り方
為替レートの読み方 2WAYプライス表示
MeshroomでPhotogrammetry
CGレンダラ研究開発のためのフレームワーク『Lightmet...
iPadをハンディ3Dスキャナにするガジェット『iSense...
PGGAN：段階的に解像度を上げて学習を進めるGAN
openMVG：複数視点画像から3次元形状を復元するライブラ...
AnacondaとTensorFlowをインストールしてVi...
viser：Pythonで使える3D可視化ライブラリ
MeshLab：3Dオブジェクトの確認・変換に便利なフリーウ...
オープンソースのIT資産・ライセンス管理システム『Snipe...
iOSデバイスと接続して連携するガジェットの開発方法
Mayaのプラグイン開発
Leap MotionでMaya上のオブジェクトを操作できる...
UnityのAR FoundationでARKit 3
ManimML：機械学習の概念を視覚的に説明するためのライブ...
ブログの復旧が難航してた話
自前のShaderがおかしい件
Raspberry Pi
オープンソースの物理ベースGIレンダラ『appleseed』
ドラマ『ファーストクラス』のモーショングラフィックス
OpenCVの三角測量関数『cv::triangulatep...
WordPressのテーマを自作する
Netron：機械学習モデルを可視化するツール
1枚の画像からマテリアルを作成できる無料ツール『Materi...
WordPress on Windows Azure
OpenVDB：3Dボリュームデータ処理ライブラリ
コメント