2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
Amazon EC2ログイン用の秘密鍵を無くした場合の対処方...
OpenCVでカメラ画像から自己位置認識 (Visual O...
Photo Bash：複数の写真を組み合わせて1枚のイラスト...
ZBrushで仮面ライダー3号を造る 仮面編 横顔のシルエッ...
libigl：軽量なジオメトリ処理ライブラリ
ファンの力
Amazon Web ServicesでWordPress
SDカードサイズのコンピューター『Intel Edison』
Shader.jp：リアルタイム3DCG技術をあつかうサイト
NumSharp：C#で使えるNumPyライクな数値計算ライ...
ZBrushで仮面ライダーBLACK SUNを作る 頭部～バ...
ブログをGoogle App EngineからAmazon ...
ニューラルネットワークで画像分類
Qlone：スマホのカメラで3Dスキャンできるアプリ
ゴジラ三昧
ラクガキの立体化 分割ラインの変更・バランス調整
株式会社ヘキサドライブの研究室ページ
ラクガキの立体化 モールドの追加
pythonの機械学習ライブラリ『scikit-learn』
R-CNN (Regions with CNN featur...
Twitter APIのPythonラッパー『python-...
CreativeCOW.net
Iridescence：プロトタイピング向け軽量3D可視化ラ...
ZBrushでゴジラ2001を作ってみる 側頭部のボリューム...
顔のモデリング
3Dモデルを立体視で確認できるVRアプリを作っている
HD画質の無駄遣い
UnityからROSを利用できる『ROS#』
Rerun：マルチモーダルデータの可視化アプリとSDK
Kornia：微分可能なコンピュータービジョンライブラリ
Dlib：C++の機械学習ライブラリ
ZBrushでアヴァン・ガメラを作ってみる 口のバランス調整
MVStudio：オープンソースのPhotogrammetr...
書籍『イラストで学ぶ ディープラーニング』
iOSで使えるJetpac社の物体認識SDK『DeepBel...
天体写真の3D動画
オープンソースの顔認識フレームワーク『OpenBR』
PCA (主成分分析)
OpenCVで顔のモーフィングを実装する
CycleGAN：ドメイン関係を学習した画像変換
実写と実写の合成時の色の馴染ませテクニック
OpenCVのfindEssentialMat関数を使ったサ...
コメント