2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
ZBrushで仮面ライダー3号を造る 仮面編 リファレンス画...
Raspberry Piでセンサーの常時稼働を検討する
ちょっと凝り過ぎなWebキャンペーン：全日本バーベイタム選手...
libigl：軽量なジオメトリ処理ライブラリ
R-CNN (Regions with CNN featur...
Mayaのレンダリング アトリビュート
Google製オープンソース機械学習ライブラリ『Tensor...
TorchStudio：PyTorchのための統合開発環境と...
ZBrushでアヴァン・ガメラを作ってみる 爪とトゲを追加
C#で使える遺伝的アルゴリズムライブラリ『GeneticSh...
ラクガキの立体化 胴体の追加
OpenVDB：3Dボリュームデータ処理ライブラリ
iPhone・iPod touchで動作する知育ロボット『R...
OpenCVでPhotoshopのプラグイン開発
Texturing & Modeling A Pro...
Point Cloud Utils：Pythonで3D点群・...
OpenGV：画像からカメラの3次元位置・姿勢を推定するライ...
オープンソースの取引プラットフォーム
KelpNet：C#で使える可読性重視のディープラーニングラ...
SDカードサイズのコンピューター『Intel Edison』
ブラウザ操作自動化ツール『Selenium』を試す
オープンソースの物理ベースGIレンダラ『appleseed』
中学3年生が制作した短編映像作品『2045』
Python2とPython3
この本読むよ
BlenderのRigifyでリギング
『シン・ゴジラ』のコンセプトアニメーションのメイキング動画が...
『ローグ・ワン/スター・ウォーズ・ストーリー』"あのキャラク...
UnityでTweenアニメーションを実装できる3種類の無料...
オープンソースの顔認識フレームワーク『OpenBR』
ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調...
OpenCVでiPhone6sのカメラをキャリブレーションす...
為替レートの読み方 2WAYプライス表示
畳み込みニューラルネットワーク (CNN: Convolut...
Shader.jp：リアルタイム3DCG技術をあつかうサイト
ZBrushのキャンバスにリファレンス画像を配置する
Manim：Pythonで使える数学アニメーションライブラリ
Fast R-CNN：ディープラーニングによる一般物体検出手...
OpenCVでカメラ画像から自己位置認識 (Visual O...
3Dグラフィックスの入門書
Oculus Goを購入！
ニューラルネットワークと深層学習
コメント