2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
OpenMayaRender
ラクガキの立体化
OpenCV
SIGGRAPH Asia
顔のモデリング
ZBrushでアヴァン・ガメラを作ってみる 爪とトゲを追加
Verilog HDL
Structure from Motion (多視点画像から...
フリーのUV展開ツール Roadkill UV Tool
『ピクサー展』へ行ってきた
ガメラ生誕50周年
DensePose：画像中の人物表面のUV座標を推定する
オープンソースの顔の動作解析ツールキット『OpenFace』
MRenderUtil::raytrace
ZBrushでアヴァン・ガメラを作ってみる 口内の微調整・身...
Physically Based Rendering
プログラムによる景観の自動生成
Seleniumを使ったFXや株の自動取引
『スター・ウォーズ 最後のジェダイ』のVFXブレイクダウン ...
Unityの各コンポーネント間でのやり取り
Photogrammetry (写真測量法)
iPadをハンディ3Dスキャナにするガジェット『iSense...
TensorSpace.js：ニューラルネットワークの構造を...
Texturing & Modeling A Pro...
MeshLab：3Dオブジェクトの確認・変換に便利なフリーウ...
Google Chromecast
2D→3D復元技術で使われる用語まとめ
Open3D：3Dデータ処理ライブラリ
日本でMakersは普及するだろうか？
ZBrushでアヴァン・ガメラを作ってみる 首回りの修正・脚...
C++の抽象クラス
顔追跡による擬似3D表示『Dynamic Perspecti...
OpenCVのfindEssentialMat関数を使ったサ...
Google Earth用の建物を簡単に作れるツール Goo...
ZBrushでアヴァン・ガメラを作ってみる 甲羅の修正・脚の...
Accord.NET Framework：C#で使える機械学...
ManuelBastioniLAB：人体モデリングできるBl...
フォトンの放射から格納までを可視化した動画
『スター・ウォーズ/スカイウォーカーの夜明け』のVFXブレイ...
Polyscope：3Dデータ操作用GUIライブラリ
シン・ゴジラのファンアート
Mask R-CNN：ディープラーニングによる一般物体検出・...
コメント