2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
MeshroomでPhotogrammetry
3Dグラフィックスの入門書
科学技術計算向けスクリプト言語『Julia』
BGSLibrary：OpenCVベースの背景差分ライブラリ
Physically Based Rendering
OpenFace：Deep Neural Networkによ...
ガメラ生誕50周年
Live CV：インタラクティブにComputer Visi...
Pix2Pix：CGANによる画像変換
Photogrammetry (写真測量法)
Composition Rendering：Blenderに...
ZBrushで仮面ライダー3号を造る 仮面編 Clay Po...
RefineNet (Multi-Path Refineme...
ZBrushでアヴァン・ガメラを作ってみる モールドの彫り込...
トランスフォーマーの変形パターンを覚えるのは楽しいと思うんだ
fSpy：1枚の写真からカメラパラメーターを割り出すツール
ROSでガンダムを動かす
Raspberry PiでIoTごっこ
ZBrushでアヴァン・ガメラを作ってみる 頭頂部と首周りを...
オープンソースの取引プラットフォーム
ZBrush 4R7
MeshLab：3Dオブジェクトの確認・変換に便利なフリーウ...
コンピュータビジョンの技術マップ
Google App Engineのデプロイ失敗
アニゴジ関連情報
ZBrushでアヴァン・ガメラを作ってみる 甲羅のバランス調...
ZBrushで仮面ライダー3号を造る 仮面編 PolyGro...
OpenCVのfindEssentialMat関数を使ったサ...
VCG Library：C++のポリゴン操作ライブラリ
Blender 2.81でIntel Open Image ...
畳み込みニューラルネットワーク (CNN: Convolut...
iOSで使えるJetpac社の物体認識SDK『DeepBel...
AmazonEC2のインスタンスをt1.microからt2....
映画『ブレードランナー 2049』のVFX
OpenCV 3.3.0 contribのsfmモジュールの...
3D Gaussian Splatting：リアルタイム描画...
OpenMVS：Multi-View Stereoによる3次...
顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト
PyTorch3D：3Dコンピュータービジョンライブラリ
OpenMesh：オープンソースの３Dメッシュデータライブラ...
BSDF： (Bidirectional scatterin...
Russian3DScannerのトポロジー転送ツール『Wr...
コメント