2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
UnityでShaderの入力パラメータとして行列を渡す
ブログのデザイン変えました
html5のcanvasの可能性
TensorSpace.js：ニューラルネットワークの構造を...
MetaHumanの頭部をBlenderで編集できるアドオン
SIGGRAPH論文へのリンクサイト
Raspberry Piでセンサーの常時稼働を検討する
ラクガキの立体化 反省
MRenderUtil::raytrace
機械学習について最近知った情報
オープンソースの物理ベースレンダラ『Mitsuba』をMay...
3Dモデルを立体視で確認できるVRアプリを作っている
TVML (TV program Making langua...
第1回 3D勉強会＠関東『SLAMチュートリアル大会』
COLMAP：オープンソースのSfM・MVSツール
ラクガキの立体化 分割ラインの変更・バランス調整
ヘッドマウントディスプレイとビジュアリゼーションの未来
OpenCVのfindEssentialMat関数を使ったサ...
Geogram：C++の3D幾何アルゴリズムライブラリ
白組による『シン・ゴジラ』CGメイキング映像が公開された！
C++始めようと思うんだ
ZBrushCoreのTransposeとGizmo 3D
書籍『仕事ではじめる機械学習』を読みました
3D復元技術の情報リンク集
Adobeの手振れ補正機能『ワープスタビライザー』の秘密
FCN (Fully Convolutional Netwo...
OpenCVでiPhone6sのカメラをキャリブレーションす...
書籍『OpenCV 3 プログラミングブック』を購入
Windows10でPyTorchをインストールしてVSCo...
OpenMayaのPhongShaderクラス
OpenCVの超解像(SuperResolution)モジュ...
オープンソースのプリント基板設計ツール『KiCad』
Facebookの顔認証技術『DeepFace』
Open3D：3Dデータ処理ライブラリ
ゴジラ(2014)のメイキング
ZBrushのUndo Historyをカメラ固定で動画化す...
CGのためのディープラーニング
Unity Scriptコーディング→Unreal Engi...
SIGGRAPH Asia
トランスフォーマーロストエイジのメイキング
OpenCV3.3.0でsfmモジュールのビルドに成功！
CLO：服飾デザインツール
コメント