カーネギーメロン大学が開発している、顔画像から個人を識別するフレームワークOpenFaceと同じ名前で混乱しますが、
ケンブリッジ大学 Multicomp groupが開発しているOpenFaceという全く別のツールキットがあります。こちらは、顔検出、ランドマーク検出、頭の姿勢推定、表情変化の認識、視線推定などをリアルタイムに行うもの。
Copyright.txtによると、アカデミックまたは非商用に限り利用可能だそうです。商用利用は不可。
OpenFace: an open source facial behavior analysis toolkit
OpenFaceは、コンピュータビジョン・機械学習の研究者、情緒的コンピューティングのコミュニティ、顔の動作・表情の変化を用いたインタラクティブなアプリケーションの開発者を対象としたツールです。
OpenFaceは、顔のランドマーク検出、頭の姿勢推定、顔のAction Unitの認識、視線推定が可能な最初のツールキットです。OpenFaceのコアとなるコンピュータビジョンアルゴリズムは、上記のタスクすべてでstate-of-the-artな結果を示しています。
さらに、OpenFaceはリアルタイムに動作し、普通のウェブカメラで実行できます。特別なハードウェアは必要ありません。
Dockerfileもありますね。
公式Wikiはこちら↓
https://github.com/TadasBaltrusaitis/OpenFace/wiki
このツールキットの前身はCLM-framework(Cambridge face tracker)というフレームワークだったようです。↓
https://github.com/TadasBaltrusaitis/CLM-framework
YouTubeで公開されているデモ動画もCLM-framework時代のもの。
顔のAction Unitって概念、そういえばKinect SDKの顔認識機能でもあったな。FACS(Facial Action Coding System)の考えがベースだろうか。
関連記事
OpenCV 3.3.0 contribのsfmモジュールの...
BlenderのPython環境にPyTorchをインストー...
ミニ四駆を改造してBluetoothラジコン化する
Netron：機械学習モデルを可視化するツール
SSD (Single Shot Multibox Dete...
RefineNet (Multi-Path Refineme...
OpenMVS：Multi-View Stereoによる3次...
NeRF (Neural Radiance Fields)：...
Mitsuba 2：オープンソースの物理ベースレンダラ
openMVGをWindows10 Visual Studi...
CGAN (Conditional GAN)：条件付き敵対的...
ブログの復旧が難航してた話
Webスクレイピングの勉強会に行ってきた
OpenCVの三角測量関数『cv::triangulatep...
Live CV：インタラクティブにComputer Visi...
仮想関数
Arduinoで作るダンボーみたいなロボット『ピッコロボ』
書籍『3次元コンピュータビジョン計算ハンドブック』を購入
PythonのHTML・XMLパーサー『BeautifulS...
Arduinoで人感センサーを使う
Active Appearance Models（AAM）
参考書
Unityの薄い本
OpenCVの超解像(SuperResolution)モジュ...
Python for Unity：UnityEditorでP...
AndroidもopenGLも初心者さ (でもJavaは知っ...
adskShaderSDK
手を動かしながら学ぶデータマイニング
3D復元技術の情報リンク集
TensorSpace.js：ニューラルネットワークの構造を...
GeoGebra：無料で使える数学アプリ
機械学習について最近知った情報
フィクションに登場するUIデザインのまとめサイト
Point Cloud Libraryに動画フォーマットが追...
OpenCVのfindEssentialMat関数を使ったサ...
iPhoneで3D写真が撮れるアプリ『seene』
PythonでBlenderのAdd-on開発
OpenCV3.3.0でsfmモジュールのビルドに成功！
AfterEffectsプラグイン開発
OpenCV 3.1のsfmモジュールのビルド再び
KelpNet：C#で使える可読性重視のディープラーニングラ...
株式会社ヘキサドライブの研究室ページ
コメント