2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
Kaolin：3Dディープラーニング用のPyTorchライブ...
無料で使える人体3DCG作成ツール
Boost オープンソースライブラリ
定数
uvでWindows11のPython環境を管理する
仮想関数
OpenMVSのサンプルを動かしてみる
ニンテンドー3DSのGPU PICA200
ZBrush 2018へのアップグレード
ZBrushでアヴァン・ガメラを作ってみる 甲羅の修正・脚の...
SONYの自律型エンタテインメントロボット『aibo』
konashiのサンプルコードを動かしてみた
リメイク版ロボコップスーツのメイキング
ZBrushでゴジラ2001を作ってみる 姿勢の変更
UnityからROSを利用できる『ROS#』
ラクガキの立体化 分割ラインの変更・バランス調整
ZBrushでゴジラ2001を作ってみる 身体のバランスを探...
Maya API Reference
動的なメモリの扱い
WordPressのサーバ引っ越し方法を考える
写真に3Dオブジェクトを違和感無く合成する『3DPhotoM...
RefineNet (Multi-Path Refineme...
ZBrushでゴジラ2001を作ってみる 身体のシルエット出...
Oculus Goを購入！
マルコフ連鎖モンテカルロ法
GoB：ZBrushとBlenderを連携させるアドオン
3Dグラフィックスの入門書
ファンの力
ポリ男からMetaHumanを作る
ZBrushでゴジラ2001を作ってみる 身体のアタリを作る
ZBrushで作った3Dモデルを立体視で確認できるVRアプリ...
CNN Explainer：畳み込みニューラルネットワーク可...
このブログのデザインに飽きてきた
PyDataTokyo主催のDeep Learning勉強会
Pix2Pix：CGANによる画像変換
網元AMIで作ったWordpressサイトのインスタンスをt...
Photo Bash：複数の写真を組み合わせて1枚のイラスト...
SegNet：ディープラーニングによるSemantic Se...
geometry3Sharp：Unity C#で使えるポリゴ...
ZBrushでアヴァン・ガメラを作ってみる 頭頂部と首周りを...
Kinect for Windows V2のプレオーダー開始
組み込み向けのWindows OS 『Windows Emb...
コメント