カーネギーメロン大学が開発している、顔画像から個人を識別するフレームワークOpenFaceと同じ名前で混乱しますが、
ケンブリッジ大学 Multicomp groupが開発しているOpenFaceという全く別のツールキットがあります。こちらは、顔検出、ランドマーク検出、頭の姿勢推定、表情変化の認識、視線推定などをリアルタイムに行うもの。
Copyright.txtによると、アカデミックまたは非商用に限り利用可能だそうです。商用利用は不可。
OpenFace: an open source facial behavior analysis toolkit
OpenFaceは、コンピュータビジョン・機械学習の研究者、情緒的コンピューティングのコミュニティ、顔の動作・表情の変化を用いたインタラクティブなアプリケーションの開発者を対象としたツールです。
OpenFaceは、顔のランドマーク検出、頭の姿勢推定、顔のAction Unitの認識、視線推定が可能な最初のツールキットです。OpenFaceのコアとなるコンピュータビジョンアルゴリズムは、上記のタスクすべてでstate-of-the-artな結果を示しています。
さらに、OpenFaceはリアルタイムに動作し、普通のウェブカメラで実行できます。特別なハードウェアは必要ありません。
Dockerfileもありますね。
公式Wikiはこちら↓
https://github.com/TadasBaltrusaitis/OpenFace/wiki
このツールキットの前身はCLM-framework(Cambridge face tracker)というフレームワークだったようです。↓
https://github.com/TadasBaltrusaitis/CLM-framework
YouTubeで公開されているデモ動画もCLM-framework時代のもの。
顔のAction Unitって概念、そういえばKinect SDKの顔認識機能でもあったな。FACS(Facial Action Coding System)の考えがベースだろうか。
関連記事
UnityでLight Shaftを表現する
Windows10でPyTorchをインストールしてVSCo...
clearcoat Shader
書籍『ゼロから作るDeep Learning』で自分なりに学...
UnityでOpenCVを使うには？
Super Resolution：OpenCVの超解像処理モ...
Raspberry Pi 2を買いました
ブラウザ操作自動化ツール『Selenium』を試す
Photogrammetry (写真測量法)
コンピュータビジョンの技術マップ
CGレンダラ研究開発のためのフレームワーク『Lightmet...
ROMOハッカソンに行ってきた
konashiのサンプルコードを動かしてみた
Unity MonoBehaviourクラスのオーバーライド...
Unityで強化学習できる『Unity ML-Agents』
Theia：オープンソースのStructure from M...
ヘッドマウントディスプレイとビジュアリゼーションの未来
OpenMVS：Multi-View Stereoによる3次...
疑似3D写真が撮れるiPhoneアプリ『Seene』がアップ...
書籍『データビジュアライゼーションのデザインパターン20』読...
Google製オープンソース機械学習ライブラリ『Tensor...
Unityで画面タッチ・ジェスチャ入力を扱う無料Asset『...
Runway ML：クリエイターのための機械学習ツール
uGUI：Unityの新しいGUI作成システム
OpenAR：OpenCVベースのマーカーARライブラリ
海外ドラマのChromaKey
iOSで使えるJetpac社の物体認識SDK『DeepBel...
Open3D：3Dデータ処理ライブラリ
Regard3D：オープンソースのStructure fro...
オープンソースのIT資産・ライセンス管理システム『Snipe...
openMVGをWindows10 Visual Studi...
SSII2014 チュートリアル講演会の資料
Verilog HDL
HD画質の無駄遣い その２
AnacondaとTensorFlowをインストールしてVi...
Math.NET Numerics：Unityで使える数値計...
GoB：ZBrushとBlenderを連携させるアドオン
FCN (Fully Convolutional Netwo...
iPhone・iPod touchで動作する知育ロボット『R...
Math Inspector：科学計算向けビジュアルプログラ...
Paul Debevec
WinSCP
コメント