2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
Adobeの手振れ補正機能『ワープスタビライザー』の秘密
チャットツール用bot開発フレームワーク『Hubot』
『ピクサー展』へ行ってきた
ZBrushでアヴァン・ガメラを作ってみる 甲羅のバランス調...
ZBrushトレーニング
Python.NET：Pythonと.NETを連携させるパッ...
参考になりそうなサイト
タマムシっぽい質感
Theia：オープンソースのStructure from M...
Houdiniのライセンスの種類
映画『ブレードランナー 2049』のVFX
Maya 2015から標準搭載されたMILA
『スター・ウォーズ 最後のジェダイ』のVFXブレイクダウン ...
ディープラーニング
UnityでTweenアニメーションを実装できる3種類の無料...
ZScript
ファンの力
ZBrushでアマビエを作る その2
geometry3Sharp：Unity C#で使えるポリゴ...
Pythonのソースコードに特化した検索エンジン『Nulle...
Cartographer：オープンソースのSLAMライブラリ
Webサイトのワイヤーフレームが作成できるオンラインツール
ZBrushでアヴァン・ガメラを作ってみる 爪とトゲを追加
『手を動かしながら学ぶエンジニアのためのデータサイエンス』ハ...
レンダラ制作はOpenGL とか DirectX を使わなく...
R-CNN (Regions with CNN featur...
ZBrushで人型クリーチャー
UnityでLight Shaftを表現する
CGAN (Conditional GAN)：条件付き敵対的...
OpenCV 3.1のsfmモジュールのビルド再び
ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始...
粘土をこねるようなスカルプトモデリング
Windows10でPyTorchをインストールしてVSCo...
機械学習について最近知った情報
タダでRenderManを体験する方法
NeuralNetwork.NET：.NETで使えるTens...
Unity MonoBehaviourクラスのオーバーライド...
OpenCV 3.3.0-RCでsfmモジュールをビルド
RefineNet (Multi-Path Refineme...
映画『シン・仮面ライダー』 メイキング情報まとめ
MVStudio：オープンソースのPhotogrammetr...
Maya LTでFBIK(Full Body IK)
コメント