FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ

2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。

The FreeMoCap Project

Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。

このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。

FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。


スポンサーリンク

ソースコードはGitHubにある。

プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。


スポンサーリンク


インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
ArUco:OpenCVベースのコンパクトなARライブラリ
最近、ARToolKit以外にもっとコンパクトなARライブラリがないか調べてる。 ARアプリを作りたいわけじゃなくて、アプリケーション開発の部品として、単眼カメラによるマーカー認識で3次元座標を取得する機能が欲しいだけなので、あんまりゴテゴ...


Blender用のプラグインも準備中とのことです↓



複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。



スポンサーリンク

関連記事

画像生成AI Stable Diffusionで遊ぶ
ポリゴンジオメトリ処理ライブラリ『pmp-library (Polygon Mesh Process...
CNN Explainer:畳み込みニューラルネットワーク可視化ツール
イタリアの自動車ブランドFiatとゴジラがコラボしたCMのメイキング
ZBrushで仮面ライダー3号を造る 仮面編 PolyGroup作成に再挑戦
写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』
Physically Based Rendering
ManimML:機械学習の概念を視覚的に説明するためのライブラリ
OpenCV 3.3.0-RCでsfmモジュールをビルド
シン・ゴジラのファンアート
為替レートの読み方 2WAYプライス表示
UnityのGlobal Illumination
Webサイトのワイヤーフレームが作成できるオンラインツール
ZBrush 4R7
ディープラーニングに対応したPythonの機械学習ライブラリ『Pylearn2』
海外ドラマのChromaKey
ZBrushでアヴァン・ガメラを作ってみる 脚のポーズ調整
スクレイピング
『パシフィック・リム: アップライジング』のVFXブレイクダウン まとめ
Mayaのプラグイン開発
CGレンダラ研究開発のためのフレームワーク『Lightmetrica (ライトメトリカ)』
iPadをハンディ3Dスキャナにするガジェット『iSense 3D Scanner』
HD画質の無駄遣い
Open Shading Language (OSL)
『スター・ウォーズ/スカイウォーカーの夜明け』のVFXブレイクダウン
ZBrushで仮面ライダー3号を造る 仮面編 DynaMesh
素敵なパーティクル
RSSフィードを読込んで表示するWordpressプラグイン『RSSImport』
ZScript
OANDAのfxTrade API
ZBrushでゴジラ2001を作ってみる 姿勢の変更
AMIMOTO(PVM版)で作成したインスタンスをAMIMOTO (HVM版)へ移行する
OpenVDB:3Dボリュームデータ処理ライブラリ
組み込み向けのWindows OS 『Windows Embedded』
ラクガキの立体化 モールドの追加
KelpNet:C#で使える可読性重視のディープラーニングライブラリ
Windows Server 2008にAutodesk Maya 2009をインストール
3Dグラフィックスの入門書
『スター・ウォーズ 最後のジェダイ』のVFXブレイクダウン まとめ
ZBrushでアヴァン・ガメラを作ってみる モールドの彫り込み・身体の形出し
池袋パルコで3Dのバーチャルフィッティング『ウェアラブル クロージング バイ アーバンリサーチ』
ZBrushのUV MasterでUV展開

コメント