2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
ZBrushでアヴァン・ガメラを作ってみる おでこ(？)のバ...
トランスフォーマーの変形パターンを覚えるのは楽しいと思うんだ
スターウォーズ エピソードVIIの予告編
『PIXARのひみつ展』に行ってきた
素敵なパーティクル
C++の抽象クラス
シン・ゴジラのファンアート
スクラッチで既存のキャラクターを立体化したい
まだ続くブログの不調
オープンソースの顔認識フレームワーク『OpenBR』
画像生成AI Stable Diffusionで遊ぶ
書籍『イラストで学ぶ ディープラーニング』
フォトンの放射から格納までを可視化した動画
TeleSculptor：空撮動画からPhotogramme...
Caffe：読みやすくて高速なディープラーニングのフレームワ...
ZBrush4新機能ハイライト 3DCG CAMP 2010
OpenCVのfindEssentialMat関数を使ったサ...
映画『ジュラシック・ワールド』のVFXメイキング
ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始...
UnityのAR FoundationでARKit 3
Point Cloud Utils：Pythonで3D点群・...
JavaによるCGプログラミング入門サイト (日本語)
フィーリングに基づくタマムシの質感表現
オープンソースの顔の動作解析ツールキット『OpenFace』
Mitsuba 2：オープンソースの物理ベースレンダラ
WordPressプラグインの作り方
ZBrushで仮面ライダー3号を造る 仮面編
ZBrushで仮面ライダー3号を造る 仮面編 リファレンス画...
ZBrushでアヴァン・ガメラを作ってみる 口のバランス調整
Structure from Motion (多視点画像から...
ゴジラ三昧
書籍『ゼロから作るDeep Learning』で自分なりに学...
BlenderのRigifyでリギング
CGのためのディープラーニング
Fast R-CNN：ディープラーニングによる一般物体検出手...
Maya API Reference
ManuelBastioniLAB：人体モデリングできるBl...
Adobe Photoshop CS4 Extendedの3...
映画『ブレードランナー 2049』のVFX
PSPNet (Pyramid Scene Parsing ...
トランスフォーマーロストエイジのメイキング
OpenCV 3.1のsfmモジュールを試す
コメント