2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
オープンソースのテクスチャマッピングシステム『Ptex』
アニゴジ関連情報
Unity ARKitプラグインサンプルのドキュメントを読む
映画『ゴジラ-1.0』 メイキング情報まとめ
ZBrushで手首のモデリングをリファイン
ハリウッド版「GAIKING」パイロット映像
geometry3Sharp：Unity C#で使えるポリゴ...
LLM Visualization：大規模言語モデルの可視化
ラクガキの立体化 3Dプリント注文
オープンソースのプリント基板設計ツール『KiCad』
ZBrushでゴジラ2001を作ってみる 目元だけ作り込んで...
書籍『OpenCV 3 プログラミングブック』を購入
Geogram：C++の3D幾何アルゴリズムライブラリ
Fast R-CNN：ディープラーニングによる一般物体検出手...
PythonでBlenderのAdd-on開発
Google App Engine上のWordPressでF...
ベイズ推定とグラフィカルモデル
3DCG Meetup #4に行ってきた
映画『ミュータント・タートルズ』を観てきた
DensePose：画像中の人物表面のUV座標を推定する
機械学習手法『Random Forest』
PyTorch3D：3Dコンピュータービジョンライブラリ
C++の抽象クラス
動的なメモリの扱い
SIGGRAPH ASIAのマスコット
3Dスキャンしたテクスチャから照明を除去するUnityツール...
Cartographer：オープンソースのSLAMライブラリ
ヒーローに変身なりきりアーケードゲーム『ナレルンダー』
ZBrushでアヴァン・ガメラを作ってみる おでこ(？)のバ...
trimesh：PythonでポリゴンMeshを扱うライブラ...
Math Inspector：科学計算向けビジュアルプログラ...
第20回 文化庁メディア芸術祭『3DCG表現と特撮の時代』
TorchStudio：PyTorchのための統合開発環境と...
ジュラシック・パークのメイキング
viser：Pythonで使える3D可視化ライブラリ
AmazonEC2のインスタンスをt1.microからt2....
書籍『開田裕治 怪獣イラストテクニック』
Unityで画面タッチ・ジェスチャ入力を扱う無料Asset『...
GeoGebra：無料で使える数学アプリ
白組による『シン・ゴジラ』CGメイキング映像が公開された！
クラスの基本
AR (Augmented Reality)とDR (Dim...
コメント