2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
映画『シン・仮面ライダー』 メイキング情報まとめ
WordPress on Google App Engine...
ガメラ生誕50周年
第1回 3D勉強会＠関東『SLAMチュートリアル大会』
OpenGVのライブラリ構成
PyMC：Pythonのベイズ統計ライブラリ
ZBrushで仮面ライダー3号を造る 仮面編 Dam Sta...
OpenVDB：3Dボリュームデータ処理ライブラリ
OpenCV
UnityのAR FoundationでARKit 3
OpenCVでカメラ画像から自己位置認識 (Visual O...
OpenMVS：Multi-View Stereoによる3次...
統計的な顔モデル
ラクガキの立体化 1年半ぶりの続き
AfterEffectsプラグイン開発
Unityで画面タッチ・ジェスチャ入力を扱う無料Asset『...
Google App Engineのデプロイ失敗
ZBrushの作業環境を見直す
参考になりそうなサイト
まだ続くブログの不調
ベイズ推定とグラフィカルモデル
マジョーラ
iPhone欲しいなぁ
PythonのHTML・XMLパーサー『BeautifulS...
ハリウッド版「GAIKING」パイロット映像
Unityの各コンポーネント間でのやり取り
Multi-View Environment：複数画像から3...
『スター・ウォーズ 最後のジェダイ』のVFXブレイクダウン ...
単純に遊びに行くのはだめなのか？
Verilog HDL
Super Resolution：OpenCVの超解像処理モ...
YOLO (You Only Look Once)：ディープ...
ZBrushでアヴァン・ガメラを作ってみる 脚のポーズ調整
CEDEC 3日目
ドットインストールのWordPress入門レッスン
BlenderでPhotogrammetryできるアドオン
Unityをレンダラとして活用する
Manim：Pythonで使える数学アニメーションライブラリ
Unityで学ぶC#
hloc：SuperGlueで精度を向上させたSfM・Vis...
ZBrushでアヴァン・ガメラを作ってみる 全体のバランス調...
Webサイトのワイヤーフレームが作成できるオンラインツール
コメント