2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
オープンソースのプリント基板設計ツール『KiCad』
レンダラ制作はOpenGL とか DirectX を使わなく...
Boost オープンソースライブラリ
CGALDotNet：計算幾何学ライブラリ CGALのC#ラ...
機械学習での「回帰」とは？
Pythonのソースコードに特化した検索エンジン『Nulle...
pythonの機械学習ライブラリ『scikit-learn』
PureRef：リファレンス画像専用ビューア
OpenFace：Deep Neural Networkによ...
『パシフィック・リム: アップライジング』のVFXブレイクダ...
BlenderProc：Blenderで機械学習用の画像デー...
マジョーラ
Oculus Goを購入！
ZBrushでゴジラ2001を作ってみる 身体のシルエット出...
uGUI：Unityの新しいGUI作成システム
Raytracing Wiki
Deep Fluids：流体シミュレーションをディープラーニ...
映画『シン・仮面ライダー』 メイキング情報まとめ
UnityのGlobal Illumination
ZBrushでアマビエを作る その2
Unityで画面タッチ・ジェスチャ入力を扱う無料Asset『...
ZBrushで仮面ライダー3号を造る 仮面編 リファレンス画...
Model View Controller
ゴジラ(2014)のメイキング
写真に3Dオブジェクトを違和感無く合成する『3DPhotoM...
OpenCV 3.1とopencv_contribモジュール...
単純に遊びに行くのはだめなのか？
ガメラ生誕50周年
WordPress on Google App Engine...
ZBrushのハードサーフェイス用ブラシ
HD画質の無駄遣い
Adobe Photoshop CS5の新機能
MeshroomでPhotogrammetry
Autodesk CompositeとAutodesk Ma...
3Dスキャンしたテクスチャから照明を除去するUnityツール...
ラクガキの立体化 モールドの追加
フルCGのウルトラマン！？
ZBrushでカスタムUIを設定する
CycleGAN：ドメイン関係を学習した画像変換
MLDemos：機械学習について理解するための可視化ツール
「ベンジャミン·バトン数奇な人生」でどうやってCGの顔を作っ...
SVM (Support Vector Machine)
コメント