2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
ZBrushでゴジラ2001を作ってみる 姿勢の変更
Deep Learningとその他の機械学習手法の性能比較
cvui：OpenCVのための軽量GUIライブラリ
ROSでガンダムを動かす
ラクガキの立体化 進捗
ポリゴン用各種イテレータと関数セット
フルCGのウルトラマン！？
ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調...
OpenCV 3.1とopencv_contribモジュール...
Open3D：3Dデータ処理ライブラリ
ラクガキの立体化 モールドの追加
Facebookの顔認証技術『DeepFace』
Blender 2.81でIntel Open Image ...
1枚の画像からマテリアルを作成できる無料ツール『Materi...
UnityでARKit2.0
NumSharp：C#で使えるNumPyライクな数値計算ライ...
Googleが画像解析旅行ガイドアプリのJetpac社を買収
SSII2014 チュートリアル講演会の資料
無料で使える人体3DCG作成ツール
ZBrushトレーニング
映画『シン・仮面ライダー』 メイキング情報まとめ
オープンソースの顔認識フレームワーク『OpenBR』
uvでWindows11のPython環境を管理する
Theia：オープンソースのStructure from M...
Transformers ”Reference & Buli...
マジョーラ
Deep Fluids：流体シミュレーションをディープラーニ...
Russian3DScannerのトポロジー転送ツール『Wr...
UnityのTransformクラスについて調べてみた
レンダラ制作はOpenGL とか DirectX を使わなく...
JavaによるCGプログラミング入門サイト (日本語)
色んな三面図があるサイト
Pythonの自然言語処理ライブラリ『NLTK(Natura...
TorchStudio：PyTorchのための統合開発環境と...
clearcoat Shader
Blender 4.2以降のWindowsPortable版...
スクラッチで既存のキャラクターを立体化したい
Kaolin：3Dディープラーニング用のPyTorchライブ...
OANDAのfxTrade API
UnityのGameObjectの向きをScriptで制御す...
Unite 2014の動画
グローバルイルミネーションに手を出す前に、やり残したことがあ...
コメント