FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ

2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。

The FreeMoCap Project

Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。

このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。

FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。

ソースコードはGitHubにある。

プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。



インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。



Blender用のプラグインも準備中とのことです↓



複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。


関連記事

ZBrushトレーニング

Siggraph Asia 2009 カンファレンスの詳細

UnityでPoint Cloudを表示する方法

画像生成AI Stable Diffusionで遊ぶ

Seleniumを使ったFXや株の自動取引

ZBrushで仮面ライダー3号を造る 仮面編 Dam Sta...

OpenSfM:PythonのStructure from ...

SIGGRAPH 2020はオンライン開催

openMVG:複数視点画像から3次元形状を復元するライブラ...

UnityでARKit2.0

『ローグ・ワン/スター・ウォーズ・ストーリー』のVFXブレイ...

BSDF: (Bidirectional scatterin...

WordPressプラグインによるサイトマップの自動生成

日立のフルパララックス立体ディスプレイ

fSpy:1枚の写真からカメラパラメーターを割り出すツール

機械学習手法『Random Forest』

OpenMVS:Multi-View Stereoによる3次...

Regard3D:オープンソースのStructure fro...

Pythonのソースコードに特化した検索エンジン『Nulle...

Blendify:コンピュータービジョン向けBlenderラ...

Deep Learningとその他の機械学習手法の性能比較

BlenderProc:Blenderで機械学習用の画像デー...

Model View Controller

Windows10でPyTorchをインストールしてVSCo...

Mechanizeで要認証Webサイトをスクレイピング

AmazonEC2のインスタンスをt1.microからt2....

マジョーラ

Mayaのポリゴン分割ツールの進化

iPhone・iPod touchで動作する知育ロボット『R...

OpenCVでiPhone6sのカメラをキャリブレーションす...

ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調...

CGWORLD CHANNEL 第21回ニコ生配信は『シン・...

布のモデリング

CLO:服飾デザインツール

WordPressプラグインの作り方

ジュラシック・パークのメイキング

2012のメイキングまとめ(途中)

UnityのMonoBehaviourクラスをシングルトン化...

動的なメモリの扱い

タマムシっぽい質感

Iterator

ラクガキの立体化 モールドの追加

コメント