2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
OpenCVで動画の手ぶれ補正
ZBrushのキャンバスにリファレンス画像を配置する
Paul Debevec
参考になりそうなサイト
WordPressのサーバ引っ越し方法を考える
なんかすごいサイト
iPhone 3GSがますます欲しくなる動画
UnityのMonoBehaviourクラスをシングルトン化...
iPhoneアプリ開発 Xcode 5のお作法
MeshroomでPhotogrammetry
R-CNN (Regions with CNN featur...
UnityでOpenCVを使うには？
OpenGVのライブラリ構成
実写と実写の合成時の色の馴染ませテクニック
ZBrushのUndo Historyをカメラ固定で動画化す...
リメイク版ロボコップスーツのメイキング
MetaHumanの頭部をBlenderで編集できるアドオン
Mitsuba 2：オープンソースの物理ベースレンダラ
DensePose：画像中の人物表面のUV座標を推定する
全脳アーキテクチャ勉強会
ヒーローに変身なりきりアーケードゲーム『ナレルンダー』
CGAN (Conditional GAN)：条件付き敵対的...
ZBrush 2018での作業環境を整える
ZBrushで仮面ライダー3号を造る 仮面編 横顔のシルエッ...
書籍『OpenCV 3 プログラミングブック』を購入
Active Appearance Models（AAM）
BGSLibrary：OpenCVベースの背景差分ライブラリ
ジュラシック・パークの続編『ジュラシック・ワールド』
OpenCVで平均顔を作るチュートリアル
ZBrushでアヴァン・ガメラを作ってみる おでこ(？)のバ...
フルCGのウルトラマン！？
Windows10でPyTorchをインストールしてVSCo...
Alice Vision：オープンソースのPhotogram...
3Dスキャンに基づくプロシージャルフェイシャルアニメーション
ZBrushでリメッシュとディティールの転送
コンピュータビジョンの技術マップ
プロシージャル手法に特化した本が出てるみたい(まだ買わないけ...
ZBrushでアヴァン・ガメラを作ってみる 腕の作り込み
Kinect for Windows v2の日本価格決定
粘土をこねるようなスカルプトモデリング
ブログのデザイン変えました
ドットインストールのWordPress入門レッスン
コメント