2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
iPhone欲しいなぁ
C++始めようと思うんだ
Mitsuba 2：オープンソースの物理ベースレンダラ
SSII 2014 デモンストレーションセッションのダイジェ...
ZBrushでアヴァン・ガメラを作ってみる 口のバランス調整
Transformers ”Reference & Buli...
Model View Controller
MeshroomでPhotogrammetry
Dlib：C++の機械学習ライブラリ
JavaScriptとかWebGLとかCanvasとか
Point Cloud Consortiumのセミナー「3D...
Blender 4.2以降のWindowsPortable版...
pythonもかじってみようかと
ZBrushで仮面ライダー3号を造る ベース編
clearcoat Shader
機械学習に役立つPythonライブラリ一覧
ZBrushでUndo Historyを動画に書き出す
Photoshopで作る怪獣特撮チュートリアル
OpenCVの三角測量関数『cv::triangulatep...
グローバルイルミネーションに手を出す前に、やり残したことがあ...
ManuelBastioniLAB：人体モデリングできるBl...
Maya API Reference
ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始...
NVIDIA GeForce RTX 3080を購入
Stanford Bunny
MB-Lab：Blenderの人体モデリングアドオン
BlenderのGeometry Nodeで遊ぶ
MythTV：Linuxでテレビの視聴・録画ができるオープン...
Unityの各コンポーネント間でのやり取り
MPFB2：Blenderの人体モデリングアドオン
海外ドラマのChromaKey
第20回 文化庁メディア芸術祭『3DCG表現と特撮の時代』
Kaolin：3Dディープラーニング用のPyTorchライブ...
トランスフォーマーロストエイジのメイキング
OpenCVのfindEssentialMat関数を使ったサ...
Texturing & Modeling A Pro...
OpenCVの超解像(SuperResolution)モジュ...
ZBrushでアヴァン・ガメラを作ってみる 下アゴと頭部を作...
UnrealCLR：Unreal Engineで.NET C...
生物の骨格
Raspberry PiのGPIOを操作するPythonライ...
iPhoneで3D写真が撮れるアプリ『seene』
コメント