2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
OpenCV 3.1のsfmモジュールのビルド再び
1枚の画像からマテリアルを作成できる無料ツール『Materi...
Google Colaboratoryで遊ぶ準備
MeshLab：3Dオブジェクトの確認・変換に便利なフリーウ...
トランスフォーマー/ロストエイジのメイキング
3Dスキャンに基づくプロシージャルフェイシャルアニメーション
第20回 文化庁メディア芸術祭『3DCG表現と特撮の時代』
Pylearn2：ディープラーニングに対応したPythonの...
OpenCVの超解像(SuperResolution)モジュ...
ZBrushで仮面ライダー3号を造る 仮面編 ZRemesh...
CLO：服飾デザインツール
UnityのMonoBehaviourクラスをシングルトン化...
疑似3D写真が撮れるiPhoneアプリ『Seene』がアップ...
Manim：Pythonで使える数学アニメーションライブラリ
BlenderのGeometry Nodeで遊ぶ
ゴジラ(2014)のメイキング
3D復元技術の情報リンク集
ZBrushでリメッシュとディティールの転送
WebGL開発に関する情報が充実してきている
SculptrisとBlenderで作ったGodzilla ...
『パシフィック・リム: アップライジング』のVFXブレイクダ...
openMVG：複数視点画像から3次元形状を復元するライブラ...
C#で使える遺伝的アルゴリズムライブラリ『GeneticSh...
ROMOハッカソンに行ってきた
trimesh：PythonでポリゴンMeshを扱うライブラ...
OpenCV 3.3.0-RCでsfmモジュールをビルド
WordPressのサーバ引っ越し方法を考える
Unity MonoBehaviourクラスのオーバーライド...
ZBrushの練習 手のモデリング
オープンソースのロボットアプリケーションフレームワーク『RO...
Raspberry PiのGPIOを操作するPythonライ...
ZBrushでアヴァン・ガメラを作ってみる 下半身のバランス...
ZBrushでゴジラ2001を作ってみる 身体のバランスを探...
Windows Server 2008にAutodesk M...
ZBrushでアヴァン・ガメラを作ってみる 壊れたデータの救...
書籍『イラストで学ぶ ディープラーニング』
Cartographer：オープンソースのSLAMライブラリ
OpenMayaRender
ZBrushでゴジラ2001を作ってみる 身体のシルエット出...
オープンソースのIT資産・ライセンス管理システム『Snipe...
UnityでOpenCVを使うには？
立体視を試してみた
コメント