2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
ROMOハッカソンに行ってきた
fSpy：1枚の写真からカメラパラメーターを割り出すツール
MPFB2：Blenderの人体モデリングアドオン
AfterEffectsプラグイン開発
オープンソースのプリント基板設計ツール『KiCad』
OpenVDB：3Dボリュームデータ処理ライブラリ
Google App EngineでWordPress
OpenCV3.3.0でsfmモジュールのビルドに成功！
ZBrushでアヴァン・ガメラを作ってみる 歯を配置
Unreal Engineの薄い本
コンピュータビジョンの技術マップ
Konashiを買った
ZBrushでアヴァン・ガメラを作ってみる 爪とトゲを追加
白組による『シン・ゴジラ』CGメイキング映像が公開された！
BlenderのRigifyでリギング
OpenCV 3.1とopencv_contribモジュール...
OpenCV バージョン4がリリースされた！
ZBrushでゴジラ2001を作ってみる 姿勢の変更
Mixamo：人型3Dキャラクターアニメーション制作サービス
3DCGのモデルを立体化するサービス
UnityのGlobal Illumination
3D映画のポストプロダクション 2D-3D変換
リメイク版ロボコップスーツのメイキング
スターウォーズ エピソードVIIの予告編
Regard3D：オープンソースのStructure fro...
法線マップを用意してCanvas上でShadingするサンプ...
マイケル・ベイの動画の感覚
UnityのAR FoundationでARKit 3
2D→3D復元技術で使われる用語まとめ
手を動かしながら学ぶデータマイニング
ZBrushで仮面ライダー3号を造る 仮面編 横顔のシルエッ...
NeuralNetwork.NET：.NETで使えるTens...
OpenFace：Deep Neural Networkによ...
OpenCVのfindEssentialMat関数を使ったサ...
GeoGebra：無料で使える数学アプリ
ポイントクラウドコンソーシアム
Mayaのレンダリング アトリビュート
WebGL開発に関する情報が充実してきている
AnacondaとTensorFlowをインストールしてVi...
Pix2Pix：CGANによる画像変換
Open3D：3Dデータ処理ライブラリ
Netron：機械学習モデルを可視化するツール
コメント