FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ

2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。

The FreeMoCap Project

Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。

このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。

FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。

ソースコードはGitHubにある。

プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。



インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。



Blender用のプラグインも準備中とのことです↓



複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。


関連記事

Kornia:微分可能なコンピュータービジョンライブラリ

Active Appearance Models(AAM)

OpenMesh:オープンソースの3Dメッシュデータライブラリ

iOSで使えるJetpac社の物体認識SDK『DeepBelief』

画像生成AI Stable Diffusionで遊ぶ

Unity MonoBehaviourクラスのオーバーライド関数が呼び出される順番

Iterator

iPhone 3GSがますます欲しくなる動画

Maya LTのQuick Rigを試す

単純に遊びに行くのはだめなのか?

Structure from Motion (多視点画像からの3次元形状復元)

ZBrushでアヴァン・ガメラを作ってみる 口のバランス調整

Faster R-CNN:ディープラーニングによる一般物体検出手法

BSDF: (Bidirectional scattering distribution funct...

ManimML:機械学習の概念を視覚的に説明するためのライブラリ

cvui:OpenCVのための軽量GUIライブラリ

布地のシワの法則性

CreativeCOW.net

OpenCV 3.1のsfmモジュールのビルド再び

pythonの機械学習ライブラリ『scikit-learn』

uGUI:Unityの新しいGUI作成システム

ZBrushで仮面ライダー3号を造る 仮面編 DynaMesh

SegNet:ディープラーニングによるSemantic Segmentation手法

Google Earth用の建物を簡単に作れるツール Google Building Maker 公...

WordPressの表示を高速化する

ZBrushで仮面ライダー3号を造る 仮面編 Clay Polish

PeopleSansPeople:機械学習用の人物データをUnityで生成する

ZBrushでカスタムUIを設定する

素敵なパーティクル

ZBrush 2018での作業環境を整える

Human Generator:Blenderの人体生成アドオン

顔画像処理技術の過去の研究

Polyscope:3Dデータ操作用GUIライブラリ

ZBrushでゴジラ2001を作ってみる 身体のアタリを作る

中学3年生が制作した短編映像作品『2045』

adskShaderSDK

PyMC:Pythonのベイズ統計ライブラリ

Pythonのソースコードに特化した検索エンジン『Nullege』

世界一下品なクマと世界一紳士なクマ

Verilog HDL

Deep Fluids:流体シミュレーションをディープラーニングで近似する

フィーリングに基づくタマムシの質感表現

コメント