FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ

2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。

The FreeMoCap Project

Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。

このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。

FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。


スポンサーリンク

ソースコードはGitHubにある。

プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。


スポンサーリンク


インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
ArUco:OpenCVベースのコンパクトなARライブラリ
最近、ARToolKit以外にもっとコンパクトなARライブラリがないか調べてる。 ARアプリを作りたいわけじゃなくて、アプリケーション開発の部品として、単眼カメラによるマーカー認識で3次元座標を取得する機能が欲しいだけなので、あんまりゴテゴ...


Blender用のプラグインも準備中とのことです↓



複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。



スポンサーリンク

関連記事

粘土をこねるようなスカルプトモデリング
SIGGRAPH ASIAのマスコット
布のモデリング
ポリゴンジオメトリ処理ライブラリ『pmp-library (Polygon Mesh Process...
機械学習のオープンソースソフトウェアフォーラム『mloss(machine learning ope...
ZBrushの作業環境を見直す
書籍『3次元コンピュータビジョン計算ハンドブック』を購入
ジュラシック・パークの続編『ジュラシック・ワールド』
1枚の画像からマテリアルを作成できる無料ツール『Materialize』
After Effects全エフェクトの解説(6.5)
映画『ジュラシック・ワールド/炎の王国』のVFXブレイクダウン まとめ
UnityでARKit2.0
COLMAP:オープンソースのSfM・MVSツール
ZBrush 4R8 リリース!
Mechanizeで要認証Webサイトをスクレイピング
ZBrushでゴジラ2001を作ってみる 頭の概形作り
ラクガキの立体化 反省
ZBrushCore
ZBrushと液晶ペンタブレットでドラゴンをモデリングするチュートリアル動画
タマムシっぽい質感
html5のcanvasの可能性
第20回 文化庁メディア芸術祭『3DCG表現と特撮の時代』
3D映画のポストプロダクション 2D-3D変換
ZBrushのZmodelerとDynamic Subdivisionを学ぶ
Unityで学ぶC#
TensorFlowでCGを微分できる『TensorFlow Graphics』
『PIXARのひみつ展』に行ってきた
Unity Scriptコーディング→Unreal Engine Scriptコーディング
Polyscope:3Dデータ操作用GUIライブラリ
GoB:ZBrushとBlenderを連携させるアドオン
ZScript
Open Shading Language (OSL)
Amazon EC2ログイン用の秘密鍵を無くした場合の対処方法
リアルタイム レイトレーシングAPI『DirectX Raytracing (DXR)』
Unreal Engine Tokyo MeetUp!へ行ってきた
SSD (Single Shot Multibox Detector):ディープラーニングによる一般...
SIGGRAPH Asia
CNN Explainer:畳み込みニューラルネットワーク可視化ツール
PyMC:Pythonのベイズ統計ライブラリ
ZBrushでアヴァン・ガメラを作ってみる 下アゴと頭部を作り込む
NeRF (Neural Radiance Fields):深層学習による未知視点合成
Kubric:機械学習用アノテーション付き動画生成パイプライン

コメント