2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。

Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
ZBrushで仮面ライダー3号を造る 仮面編 リファレンス画...
ZBrushのTranspose Masterでポーズを付け...
CGALDotNet:計算幾何学ライブラリ CGALのC#ラ...
Stanford Bunny
Structure from Motion (多視点画像から...
映画『シン・仮面ライダー』 メイキング情報まとめ
ZBrushの練習 手のモデリング
BlenderのPython環境にPyTorchをインストー...
OpenCV
疑似3D写真が撮れるiPhoneアプリ『Seene』がアップ...
iOSで使えるJetpac社の物体認識SDK『DeepBel...
ZScript
iPhone 3GSがますます欲しくなる動画
MFnDataとMFnAttribute
ハリウッド版「GAIKING」パイロット映像
Blendify:コンピュータービジョン向けBlenderラ...
2012 昨日のクローズアップ現代を見た
映画『ブレードランナー 2049』のVFX
書籍『メイキング・オブ・ピクサー 創造力をつくった人々』を読...
続・ディープラーニングの資料
書籍『ゼロから作るDeep Learning』で自分なりに学...
C++始めようと思うんだ
Google製オープンソース機械学習ライブラリ『Tensor...
LLM Visualization:大規模言語モデルの可視化
科学技術計算向けスクリプト言語『Julia』
Raspberry PiでIoTごっこ
C++ 標準テンプレートライブラリ (STL)
ZBrushでゴジラ2001を作ってみる 頭の概形作り
NeuralNetwork.NET:.NETで使えるTens...
顔モデリングのチュートリアル
Windows10でPyTorchをインストールしてVSCo...
Rerun:マルチモーダルデータの可視化アプリとSDK
Twitter APIのPythonラッパー『python-...
生物の骨格
GAN (Generative Adversarial Ne...
Vancouver Film Schoolのデモリール
プログラミングスキルとは何か?
UnityでLight Shaftを表現する
スクレイピング
Cartographer:オープンソースのSLAMライブラリ
adskShaderSDK
注文してた本が届いた


コメント