2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
OpenCVでカメラ画像から自己位置認識 (Visual O...
Mayaのシェーディングノードの区分
ZBrushでゴジラ2001を作ってみる 頭の概形作り
Netron：機械学習モデルを可視化するツール
3D映画のポストプロダクション 2D-3D変換
UnityでLight Shaftを表現する
SIGGRAPH ASIAのマスコット
Photogrammetry (写真測量法)
3Dスキャンしたテクスチャから照明を除去するUnityツール...
マルコフ連鎖モンテカルロ法
ドットインストールのWordPress入門レッスン
ZBrushのZmodelerとDynamic Subdiv...
CGレンダラ研究開発のためのフレームワーク『Lightmet...
ラクガキの立体化 胴体の追加
OpenSfM：PythonのStructure from ...
Rerun：マルチモーダルデータの可視化アプリとSDK
ManimML：機械学習の概念を視覚的に説明するためのライブ...
データサイエンティストって何だ？
プロシージャル手法に特化した本が出てるみたい(まだ買わないけ...
3Dグラフィックスの入門書
リメイク版ロボコップスーツのメイキング
第20回 文化庁メディア芸術祭『3DCG表現と特撮の時代』
ZBrushでゴジラ2001を作ってみる 側頭部のボリューム...
2D→3D復元技術で使われる用語まとめ
CGALDotNet：計算幾何学ライブラリ CGALのC#ラ...
映画『ミュータント・タートルズ』を観てきた
DCGAN (Deep Convolutional GAN)...
Russian3DScannerのトポロジー転送ツール『Wr...
『ピクサー展』へ行ってきた
Kinect for Windows V2のプレオーダー開始
Python拡張モジュールのWindows用インストーラー配...
書籍『イラストで学ぶ ディープラーニング』
仮想関数
為替レートの読み方 2WAYプライス表示
3D復元技術の情報リンク集
レンダラ制作はOpenGL とか DirectX を使わなく...
オープンソースの顔認識フレームワーク『OpenBR』
Mayaのプラグイン開発
オープンソースの取引プラットフォーム
ZBrushのお勉強
ラクガキの立体化 分割ラインの変更・バランス調整
adskShaderSDK
コメント