2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
Deep Fluids：流体シミュレーションをディープラーニ...
AmazonEC2のインスタンスをt1.microからt2....
VCG Library：C++のポリゴン操作ライブラリ
OpenCVで平均顔を作るチュートリアル
Rerun：マルチモーダルデータの可視化アプリとSDK
Photoshopで作る怪獣特撮チュートリアル
オープンソースのIT資産・ライセンス管理システム『Snipe...
Unreal Engine 5の情報が公開された！
OpenVDB：3Dボリュームデータ処理ライブラリ
ラクガキの立体化 3Dプリント注文
CEDEC 3日目
Gource：バージョン管理の履歴を可視化するツール
Point Cloud Utils：Pythonで3D点群・...
Unity ARKitプラグインサンプルのドキュメントを読む
第25回コンピュータビジョン勉強会＠関東に行って来た
ヒーローに変身なりきりアーケードゲーム『ナレルンダー』
Amazon EC2ログイン用の秘密鍵を無くした場合の対処方...
ZBrush 2018へのアップグレード
MB-Lab：Blenderの人体モデリングアドオン
Mayaのプラグイン開発
OpenCV 3.3.0 contribのsfmモジュールの...
ZBrushで作った3Dモデルを立体視で確認できるVRアプリ...
OpenAR：OpenCVベースのマーカーARライブラリ
データサイエンティストって何だ？
Unreal Engineの薄い本
ZBrushでアヴァン・ガメラを作ってみる 下アゴと頭部を作...
Unityで強化学習できる『Unity ML-Agents』
uGUI：Unityの新しいGUI作成システム
WinSCP
Twitter APIのPythonラッパー『python-...
顔モデリングのチュートリアル
マイケル・ベイの動画の感覚
OpenCV 3.1のsfmモジュールを試す
定数
Houdiniのライセンスの種類
ドラマ『ファーストクラス』のモーショングラフィックス
なんかすごいサイト
Faceshiftで表情をキャプチャしてBlender上でM...
Quartus II
スクレイピング
Google Colaboratoryで遊ぶ準備
clearcoat Shader
コメント