2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
UnityでPoint Cloudを表示する方法
OpenCV 3.3.0 contribのsfmモジュールの...
UnityでLight Shaftを表現する
DUSt3R：3Dコンピュータービジョンの基盤モデル
『PIXARのひみつ展』に行ってきた
無料で使える人体3DCG作成ツール
iPhoneアプリ開発 Xcode 5のお作法
プログラミングスキルとは何か？
Digital Emily Project：人間の顔をそっく...
ZBrushで仮面ライダー3号を造る 仮面編 PolyGro...
UnrealCV：コンピュータビジョン研究のためのUnrea...
UnityのAR FoundationでARKit 3
Point Cloud Utils：Pythonで3D点群・...
MVStudio：オープンソースのPhotogrammetr...
RSSフィードを読込んで表示するWordpressプラグイン...
SDカードサイズのコンピューター『Intel Edison』
uvでWindows11のPython環境を管理する
頭蓋骨からの顔復元と進化過程の可視化
ブログをGoogle App EngineからAmazon ...
iPadをハンディ3Dスキャナにするガジェット『iSense...
LLM Visualization：大規模言語モデルの可視化
Maya API Reference
OpenGVのライブラリ構成
Javaで作られたオープンソースの3DCGレンダラ『Sunf...
データサイエンティストって何だ？
UnityプロジェクトをGitHubで管理する
ZBrushでUndo Historyを動画に書き出す
R-CNN (Regions with CNN featur...
ZBrushでアヴァン・ガメラを作ってみる 脚のポーズ調整
定数
ZBrushと液晶ペンタブレットでドラゴンをモデリングするチ...
物理ベースレンダリングのためのマテリアル設定チートシート
OpenSfM：PythonのStructure from ...
機械学習で遊ぶ
Autodesk Mementoでゴジラを3次元復元する
OpenCVでPhotoshopのプラグイン開発
ZBrush 4R8 リリース！
スターウォーズ エピソードVIIの予告編
MB-Lab：Blenderの人体モデリングアドオン
Unity Scriptコーディング→Unreal Engi...
ZBrushで仮面ライダー3号を造る 仮面編 DynaMes...
ちょっと凝り過ぎなWebキャンペーン：全日本バーベイタム選手...
コメント