2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。

Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
AR (Augmented Reality)とDR (Dim...
『スター・ウォーズ フォースの覚醒』のVFXブレイクダウン ...
マルコフ連鎖モンテカルロ法
マイケル・ベイの動画の感覚
ZBrushでリメッシュとディティールの転送
Blendify:コンピュータービジョン向けBlenderラ...
写真に3Dオブジェクトを違和感無く合成する『3DPhotoM...
色んな三面図があるサイト
ブログをGoogle App EngineからAmazon ...
ZBrushで仮面ライダー3号を造る 仮面編 PolyGro...
組み込み向けのWindows OS 『Windows Emb...
Mean Stack開発の最初の一歩
ZBrushでゴジラ2001を作ってみる 姿勢の変更
Photoshopで作る怪獣特撮チュートリアル
C++始めようと思うんだ
Houdiniのライセンスの種類
ZBrush 2018へのアップグレード
Pylearn2:ディープラーニングに対応したPythonの...
リメイク版ロボコップスーツのメイキング
UnityでLight Shaftを表現する
ZBrushでアヴァン・ガメラを作ってみる 脚のポーズ調整
ZBrush 4R8 リリース!
法線マップを用意してCanvas上でShadingするサンプ...
Transformers ”Reference & Buli...
fSpy:1枚の写真からカメラパラメーターを割り出すツール
『ローグ・ワン/スター・ウォーズ・ストーリー』"あのキャラク...
ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調...
第1回 3D勉強会@関東『SLAMチュートリアル大会』
MPFB2:Blenderの人体モデリングアドオン
R-CNN (Regions with CNN featur...
Unite 2014の動画
昔Mayaでモデリングしたモデルをリファインしてみようか
顔のモデリング
Ambient Occlusionを解析的に求める
OpenSfM:PythonのStructure from ...
ZBrushでアヴァン・ガメラを作ってみる
ブログが1日ダウンしてました
UnityのGlobal Illumination
ZBrushのUndo Historyをカメラ固定で動画化す...
フルCGのウルトラマン!?
ベイズ推定とグラフィカルモデル
openMVG:複数視点画像から3次元形状を復元するライブラ...


コメント