2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
html5のcanvasの可能性
PSPNet (Pyramid Scene Parsing ...
ZBrushのTranspose Masterでポーズを付け...
全脳アーキテクチャ勉強会
ドラマ『ファーストクラス』のモーショングラフィックス
Unityで学ぶC#
Maya LTのQuick Rigを試す
BlenderのPython環境にPyTorchをインストー...
TVML (TV program Making langua...
書籍『開田裕治 怪獣イラストテクニック』
Math Inspector：科学計算向けビジュアルプログラ...
ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調...
Physically Based Rendering
Mean Stack開発の最初の一歩
ZBrushCore
2012のメイキングまとめ(途中)
Subsurface scatteringの動画
Manim：Pythonで使える数学アニメーションライブラリ
Math.NET Numerics：Unityで使える数値計...
Accord.NET Framework：C#で使える機械学...
ZBrushで仮面ライダー3号を造る 仮面編 DynaMes...
3D映画のポストプロダクション 2D-3D変換
書籍『OpenCV 3 プログラミングブック』を購入
Mask R-CNN：ディープラーニングによる一般物体検出・...
Runway ML：クリエイターのための機械学習ツール
ニューラルネットワークと深層学習
Active Appearance Models（AAM）
ZBrushでゴジラ2001を作ってみる 身体のアタリを作る
オープンソースの物理ベースレンダラ『Mitsuba』をMay...
UnityでOpenCVを使うには？
なんかすごいサイト
仮想関数
FacebookがDeep learningツールの一部をオ...
BlenderでPhotogrammetryできるアドオン
UnityのMonoBehaviourクラスをシングルトン化...
Twitter APIのPythonラッパー『python-...
ZBrushでアヴァン・ガメラを作ってみる 脚のポーズ調整
株式会社ヘキサドライブの研究室ページ
OpenMVS：Multi-View Stereoによる3次...
MeshLab：3Dオブジェクトの確認・変換に便利なフリーウ...
ZBrushでアヴァン・ガメラを作ってみる パーツ分割
スターウォーズ エピソードVIIの予告編
コメント