2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
BlenderのRigifyでリギング
Python拡張モジュールのWindows用インストーラー配...
色んな三面図があるサイト
MRenderUtil::raytrace
JavaによるCGプログラミング入門サイト (日本語)
WordPressの表示を高速化する
ZBrushでゴジラ2001を作ってみる 目元だけ作り込んで...
機械学習手法『Random Forest』
ブログをGoogle App EngineからAmazon ...
CGAN (Conditional GAN)：条件付き敵対的...
BlenderのGeometry Nodeで遊ぶ
書籍『OpenCV 3 プログラミングブック』を購入
フリーのUV展開ツール Roadkill UV Tool
Raspberry PiでIoTごっこ
Accord.NET Framework：C#で使える機械学...
OANDAのfxTrade API
3Dモデルを立体視で確認できるVRアプリを作っている
オープンソースのテクスチャマッピングシステム『Ptex』
レンダラ制作はOpenGL とか DirectX を使わなく...
Open3D：3Dデータ処理ライブラリ
オープンソースの物理ベースGIレンダラ『appleseed』
「ベンジャミン·バトン数奇な人生」でどうやってCGの顔を作っ...
After Effects全エフェクトの解説(6.5)
Photogrammetry (写真測量法)
AR (Augmented Reality)とDR (Dim...
書籍『メイキング・オブ・ピクサー 創造力をつくった人々』を読...
ヘッドマウントディスプレイとビジュアリゼーションの未来
Google Colaboratoryで遊ぶ準備
CLO：服飾デザインツール
ゴジラ(2014)のディティール制作の舞台裏
OpenCVでPhotoshopのプラグイン開発
C++の抽象クラス
UnityのAR FoundationでARKit 3
SONY製のニューラルネットワークライブラリ『NNabla』
頭蓋骨からの顔復元と進化過程の可視化
スクラッチで既存のキャラクターを立体化したい
CNN Explainer：畳み込みニューラルネットワーク可...
OpenCVの超解像(SuperResolution)モジュ...
CycleGAN：ドメイン関係を学習した画像変換
fSpy：1枚の写真からカメラパラメーターを割り出すツール
『ローグ・ワン/スター・ウォーズ・ストーリー』"あのキャラク...
ZBrushのTranspose Masterでポーズを付け...
コメント