2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
フリーのUV展開ツール Roadkill UV Tool
トランスフォーマーロストエイジのメイキング
Googleが画像解析旅行ガイドアプリのJetpac社を買収
3Dスキャンに基づくプロシージャルフェイシャルアニメーション
チャットツール用bot開発フレームワーク『Hubot』
手を動かしながら学ぶデータマイニング
『手を動かしながら学ぶエンジニアのためのデータサイエンス』ハ...
Google Chromecast
WordPress on Google App Engine...
Unite 2014の動画
OpenCVの三角測量関数『cv::triangulatep...
OpenCVでiPhone6sのカメラをキャリブレーションす...
テスト
定数
サンプルコードにも間違いはある？
ファンの力
U-Net：ディープラーニングによるSemantic Seg...
Unity ARKitプラグインサンプルのチュートリアルを読...
OpenAR：OpenCVベースのマーカーARライブラリ
世界一下品なクマと世界一紳士なクマ
ArUco：OpenCVベースのコンパクトなARライブラリ
ROMOハッカソンに行ってきた
ZBrushでアヴァン・ガメラを作ってみる 首回りの修正・脚...
WordPressプラグインによるサイトマップの自動生成
OpenGVの用語
Kornia：微分可能なコンピュータービジョンライブラリ
ZBrushで仮面ライダー3号を造る 仮面編 リファレンス画...
ブログのデザイン変えました
OpenMayaのPhongShaderクラス
Twitter APIのPythonラッパー『python-...
「ベンジャミン·バトン数奇な人生」でどうやってCGの顔を作っ...
iOSデバイスのためのフィジカル・コンピューティングツールキ...
2D→3D復元技術で使われる用語まとめ
DensePose：画像中の人物表面のUV座標を推定する
ZBrushでアヴァン・ガメラを作ってみる 頭頂部と首周りを...
イタリアの自動車ブランドFiatとゴジラがコラボしたCMのメ...
OpenGVのライブラリ構成
映画から想像するVR・AR時代のGUIデザイン
VGGT：マルチビュー・フィードフォワード型3Dビジョン基盤...
GAN (Generative Adversarial Ne...
CGのためのディープラーニング
自前Shaderの件 解決しました
コメント