2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
ポリ男をリファイン
Mixamo：人型3Dキャラクターアニメーション制作サービス
iPhoneで3D写真が撮れるアプリ『seene』
Google App Engineのデプロイ失敗
日本でMakersは普及するだろうか？
Open3D：3Dデータ処理ライブラリ
グローバルイルミネーションに手を出す前に、やり残したことがあ...
PythonでBlenderのAdd-on開発
顔モデリングのチュートリアル
OpenCV 3.1のsfmモジュールのビルド再び
ZBrushでゴジラ2001を作ってみる 身体のSubToo...
C++ 標準テンプレートライブラリ (STL)
ZBrushで仮面ライダー3号を造る 仮面編 横顔のシルエッ...
イタリアの自動車ブランドFiatとゴジラがコラボしたCMのメ...
ZBrushでアヴァン・ガメラを作ってみる 頭頂部の作り込み...
OpenCVで顔のランドマークを検出する『Facemark ...
Unityをレンダラとして活用する
Mask R-CNN：ディープラーニングによる一般物体検出・...
機械学習手法『Random Forest』
COLMAP：オープンソースのSfM・MVSツール
OpenCVで顔のモーフィングを実装する
『ローグ・ワン/スター・ウォーズ・ストーリー』のVFXブレイ...
Google App EngineでWordPress
『ピクサー展』へ行ってきた
ManimML：機械学習の概念を視覚的に説明するためのライブ...
Maya API Reference
ZBrushで仮面ライダー3号を造る 仮面編 ClipCur...
映画『ゴジラ-1.0』 メイキング情報まとめ
ZBrushでアヴァン・ガメラを作ってみる 脚のトゲの作り直...
BlenderのRigifyでリギング
HD画質の無駄遣い
ラクガキの立体化 分割ラインの変更・バランス調整
ZBrushでUndo Historyを動画に書き出す
SIGGRAPH 2020はオンライン開催
トランスフォーマーロストエイジのメイキング
geometry3Sharp：Unity C#で使えるポリゴ...
AMIMOTO（PVM版）で作成したインスタンスをAMIMO...
プロシージャル手法に特化した本が出てるみたい(まだ買わないけ...
JavaによるCGプログラミング入門サイト (日本語)
布のモデリング
ZBrushでアヴァン・ガメラを作ってみる 甲羅の修正・脚の...
Leap MotionでMaya上のオブジェクトを操作できる...
コメント