2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
iPhone 3GSがますます欲しくなる動画
日立のフルパララックス立体ディスプレイ
ZBrushでアヴァン・ガメラを作ってみる
WordPressプラグインによるサイトマップの自動生成
FacebookがDeep learningツールの一部をオ...
2D→3D復元技術で使われる用語まとめ
ポリゴンジオメトリ処理ライブラリ『pmp-library (...
アニゴジ関連情報
Stanford Bunny
C++始めようと思うんだ
Google Colaboratoryで遊ぶ準備
書籍『メイキング・オブ・ピクサー 創造力をつくった人々』を読...
注文してた本が届いた
OpenCVの三角測量関数『cv::triangulatep...
Gource：バージョン管理の履歴を可視化するツール
Point Cloud Libraryに動画フォーマットが追...
ブログをGoogle App EngineからAmazon ...
ManimML：機械学習の概念を視覚的に説明するためのライブ...
ZBrushでアヴァン・ガメラを作ってみる 下アゴの付け根を...
iPhoneで3D写真が撮れるアプリ『seene』
第25回コンピュータビジョン勉強会＠関東に行って来た
PGGAN：段階的に解像度を上げて学習を進めるGAN
Konashiを買った
Unityで360度ステレオVR動画を作る
HTML5・WebGLベースのグラフィックスエンジン『Goo...
Mitsuba 3：オープンソースの研究向けレンダラ
JavaScriptとかWebGLとかCanvasとか
OpenCVで動画の手ぶれ補正
OpenAR：OpenCVベースのマーカーARライブラリ
PythonでBlenderのAdd-on開発
ZBrushでアヴァン・ガメラを作ってみる 甲羅のバランス調...
OpenSfM：PythonのStructure from ...
Google App Engine上のWordPressでA...
Zibra Liquids：Unity向け流体シミュレーショ...
trimesh：PythonでポリゴンMeshを扱うライブラ...
ZBrushでメカ物を作るチュートリアル動画
Open Shading Language (OSL)
ZBrushのキャンバスにリファレンス画像を配置する
After Effects全エフェクトの解説(6.5)
ZBrushのTranspose Masterでポーズを付け...
ゴジラの造形
Caffe：読みやすくて高速なディープラーニングのフレームワ...
コメント