2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
2012のメイキングまとめ(途中)
ZBrushで仮面ライダーBLACK SUNを作る 頭部～バ...
Netron：機械学習モデルを可視化するツール
ZBrushのUV MasterでUV展開
Autodesk Mementoでゴジラを3次元復元する
世界一下品なクマと世界一紳士なクマ
機械学習手法『Random Forest』
ArUco：OpenCVベースのコンパクトなARライブラリ
UnityでPoint Cloudを表示する方法
オープンソースのロボットアプリケーションフレームワーク『RO...
OpenCVのバージョン3が正式リリースされたぞ
網元AMIで作ったWordpressサイトのインスタンスをt...
CGのためのディープラーニング
Photogrammetry (写真測量法)
書籍『イラストで学ぶ ディープラーニング』
布のモデリング
ポイントクラウドコンソーシアム
ZBrushで基本となるブラシ
BlenderのRigifyでリギング
ラクガキの立体化 目標設定
動的なメモリの扱い
クラスの基本
ブログが1日ダウンしてました
NumSharp：C#で使えるNumPyライクな数値計算ライ...
Blendify：コンピュータービジョン向けBlenderラ...
ZBrushでアヴァン・ガメラを作ってみる 歯を配置
画像認識による位置情報取得 - Semi-Direct Mo...
ZBrushでアヴァン・ガメラを作ってみる 脚のトゲの作り直...
ZBrushでアヴァン・ガメラを作ってみる 下アゴと頭部を作...
スクレイピング
トランスフォーマーロストエイジのメイキング
Unityで360度ステレオVR動画を作る
ラクガキの立体化 背中の作り込み・手首の移植
Google XML Sitemap Generatorプラ...
Raspberry Piでセンサーの常時稼働を検討する
iOSで使えるJetpac社の物体認識SDK『DeepBel...
書籍『開田裕治 怪獣イラストテクニック』
OpenCVでPhotoshopのプラグイン開発
ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始...
OpenCVの超解像(SuperResolution)モジュ...
ベイズ推定とグラフィカルモデル
Google Colaboratoryで遊ぶ準備
コメント