2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
『パシフィック・リム: アップライジング』のVFXブレイクダ...
clearcoat Shader
Raspberry Piでセンサーの常時稼働を検討する
Blender 4.2以降のWindowsPortable版...
映画から想像するVR・AR時代のGUIデザイン
ZBrushでアヴァン・ガメラを作ってみる 腕の作り込み
ニューラルネットワークで画像分類
HerokuでMEAN stack
UnityのGlobal Illumination
ROSでガンダムを動かす
CNN Explainer：畳み込みニューラルネットワーク可...
Mayaでリアルな布の質感を作るチュートリアル
C#で使える遺伝的アルゴリズムライブラリ『GeneticSh...
TensorSpace.js：ニューラルネットワークの構造を...
trimesh：PythonでポリゴンMeshを扱うライブラ...
Verilog HDL
第25回コンピュータビジョン勉強会＠関東に行って来た
MVStudio：オープンソースのPhotogrammetr...
ZBrushでアヴァン・ガメラを作ってみる モールドの彫り込...
OpenCVで顔のモーフィングを実装する
ZBrushでUndo Historyを動画に書き出す
SVM (Support Vector Machine)
Russian3DScannerのトポロジー転送ツール『Wr...
ZBrushで仮面ライダー3号を造る ベース編
FacebookがDeep learningツールの一部をオ...
ニューラルネットワークと深層学習
OpenCV バージョン4がリリースされた！
Live CV：インタラクティブにComputer Visi...
C++ 標準テンプレートライブラリ (STL)
ZBrushでアヴァン・ガメラを作ってみる 歯を配置
BlenderProc：Blenderで機械学習用の画像デー...
Iterator
Structure from Motion (多視点画像から...
AmazonEC2のインスタンスをt1.microからt2....
ZBrushでアヴァン・ガメラを作ってみる 頭頂部の作り込み...
Theia：オープンソースのStructure from M...
Texturing & Modeling A Pro...
TVML (TV program Making langua...
ZBrushでアヴァン・ガメラを作ってみる 甲羅の修正・脚の...
Subsurface scatteringの動画
Geogram：C++の3D幾何アルゴリズムライブラリ
WordPressプラグインの作り方
コメント