2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
Oculus Goを購入！
第25回コンピュータビジョン勉強会＠関東に行って来た
DUSt3R：3Dコンピュータービジョンの基盤モデル
Physically Based Rendering
Google Colaboratoryで遊ぶ準備
PCA (主成分分析)
Unityで強化学習できる『Unity ML-Agents』
ZBrushでアヴァン・ガメラを作ってみる 腕の作り込み
機械学習のオープンソースソフトウェアフォーラム『mloss(...
Unity Scriptコーディング→Unreal Engi...
ZBrushで人型クリーチャー
Netron：機械学習モデルを可視化するツール
『スター・ウォーズ/スカイウォーカーの夜明け』のVFXブレイ...
RSSフィードを読込んで表示するWordpressプラグイン...
GAN (Generative Adversarial Ne...
ZBrushでカスタムUIを設定する
ZBrushでアヴァン・ガメラを作ってみる 歯茎を別パーツへ...
スクレイピング
CycleGAN：ドメイン関係を学習した画像変換
2012のメイキングまとめ(途中)
日本でMakersは普及するだろうか？
ZBrushで仮面ライダーBLACK SUNを作る 頭部～バ...
ちょっと凝り過ぎなWebキャンペーン：全日本バーベイタム選手...
ブログが1日ダウンしてました
ZBrushでリメッシュとディティールの転送
Leap MotionでMaya上のオブジェクトを操作できる...
Cartographer：オープンソースのSLAMライブラリ
FacebookがDeep learningツールの一部をオ...
中学3年生が制作した短編映像作品『2045』
Adobe MAX 2015
iPhone x ロボットハッカソン～RomoのiPhone...
Raspberry PiでIoTごっこ
RefineNet (Multi-Path Refineme...
After Effects全エフェクトの解説(6.5)
Phongの表現力パネェ 材質別のPhong Shader用...
SIGGRAPH ASIAのマスコット
データサイエンティストって何だ？
OpenMVS：Multi-View Stereoによる3次...
『PIXARのひみつ展』に行ってきた
Unreal Engineの薄い本
UnityでShaderの入力パラメータとして行列を渡す
書籍『イラストで学ぶ ディープラーニング』
コメント