2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
Transformer Explainer：テキスト生成モデ...
CreativeCOW.net
adskShaderSDK
Accord.NET Framework：C#で使える機械学...
Multi-View Environment：複数画像から3...
ZBrushでメカ物を作るチュートリアル動画
シン・ゴジラのファンアート
ゴジラ(2014)のディティール制作の舞台裏
機械学習のオープンソースソフトウェアフォーラム『mloss(...
Webスクレイピングの勉強会に行ってきた
LLM Visualization：大規模言語モデルの可視化
GeoGebra：無料で使える数学アプリ
JavaScriptとかWebGLとかCanvasとか
OpenVDB：3Dボリュームデータ処理ライブラリ
書籍『ROSプログラミング』
ZBrushでゴジラ2001を作ってみる 身体のSubToo...
Unityの各コンポーネント間でのやり取り
株式会社ヘキサドライブの研究室ページ
Paul Debevec
OpenCVの三角測量関数『cv::triangulatep...
オープンソースの人体モデリングツール『MakeHuman』の...
オープンソースの顔認識フレームワーク『OpenBR』
ZBrushでアヴァン・ガメラを作ってみる 下アゴと頭部を作...
Mayaのプラグイン開発
中学3年生が制作した短編映像作品『2045』
CGのためのディープラーニング
ニューラルネットワークと深層学習
ROSの薄い本
オープンソースのプリント基板設計ツール『KiCad』
Web経由でRaspberry PiのGPIOを操作したい
MRenderUtil::raytrace
OpenCV 3.3.0-RCでsfmモジュールをビルド
Konashiを買った
libigl：軽量なジオメトリ処理ライブラリ
オープンソースのテクスチャマッピングシステム『Ptex』
『スター・ウォーズ/スカイウォーカーの夜明け』のVFXブレイ...
プログラムによる景観の自動生成
オープンソースのネットワーク可視化ソフトウェアプラットフォー...
Math Inspector：科学計算向けビジュアルプログラ...
ポリゴン用各種イテレータと関数セット
FCN (Fully Convolutional Netwo...
Unite 2014の動画
コメント