FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ

2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。

The FreeMoCap Project

Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。

このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。

FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。

ソースコードはGitHubにある。

プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。



インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。



Blender用のプラグインも準備中とのことです↓



複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。


関連記事

OpenCVで動画の手ぶれ補正

ZBrushのキャンバスにリファレンス画像を配置する

Paul Debevec

参考になりそうなサイト

WordPressのサーバ引っ越し方法を考える

なんかすごいサイト

iPhone 3GSがますます欲しくなる動画

UnityのMonoBehaviourクラスをシングルトン化...

iPhoneアプリ開発 Xcode 5のお作法

MeshroomでPhotogrammetry

R-CNN (Regions with CNN featur...

UnityでOpenCVを使うには?

OpenGVのライブラリ構成

実写と実写の合成時の色の馴染ませテクニック

ZBrushのUndo Historyをカメラ固定で動画化す...

リメイク版ロボコップスーツのメイキング

MetaHumanの頭部をBlenderで編集できるアドオン

Mitsuba 2:オープンソースの物理ベースレンダラ

DensePose:画像中の人物表面のUV座標を推定する

全脳アーキテクチャ勉強会

ヒーローに変身なりきりアーケードゲーム『ナレルンダー』

CGAN (Conditional GAN):条件付き敵対的...

ZBrush 2018での作業環境を整える

ZBrushで仮面ライダー3号を造る 仮面編 横顔のシルエッ...

書籍『OpenCV 3 プログラミングブック』を購入

Active Appearance Models(AAM)

BGSLibrary:OpenCVベースの背景差分ライブラリ

ジュラシック・パークの続編『ジュラシック・ワールド』

OpenCVで平均顔を作るチュートリアル

ZBrushでアヴァン・ガメラを作ってみる おでこ(?)のバ...

フルCGのウルトラマン!?

Windows10でPyTorchをインストールしてVSCo...

Alice Vision:オープンソースのPhotogram...

3Dスキャンに基づくプロシージャルフェイシャルアニメーション

ZBrushでリメッシュとディティールの転送

コンピュータビジョンの技術マップ

プロシージャル手法に特化した本が出てるみたい(まだ買わないけ...

ZBrushでアヴァン・ガメラを作ってみる 腕の作り込み

Kinect for Windows v2の日本価格決定

粘土をこねるようなスカルプトモデリング

ブログのデザイン変えました

ドットインストールのWordPress入門レッスン

コメント