FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ

2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。

The FreeMoCap Project

Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。

このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。

FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。


スポンサーリンク

ソースコードはGitHubにある。

プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。


スポンサーリンク


インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
ArUco:OpenCVベースのコンパクトなARライブラリ
最近、ARToolKit以外にもっとコンパクトなARライブラリがないか調べてる。ARアプリを作りたいわけじゃなくて、アプリケーション開発の部品として、単眼カメラによるマーカー認識で3次元座標を取得する機能が欲しいだけなので、あんまりゴテゴテ...


Blender用のプラグインも準備中とのことです↓



複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。



スポンサーリンク

関連記事

画像認識による位置情報取得 - Semi-Direct Monocular Visual Odome...

Python2とPython3

Mayaでリアルな布の質感を作るチュートリアル

スクレイピング

ZBrushでアヴァン・ガメラを作ってみる 首回りの修正・脚の作り込み

顔のモデリング

UnrealCV:コンピュータビジョン研究のためのUnreal Engineプラグイン

写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

WordPress on Windows Azure

ZBrushで基本となるブラシ

iPhone欲しいなぁ

OpenVDB:3Dボリュームデータ処理ライブラリ

SculptrisとBlenderで作ったGodzilla 2014 (Fan Made)

C++の抽象クラス

SIGGRAPH論文へのリンクサイト

ZBrushでアヴァン・ガメラを作ってみる パーツ分割

オープンソースのIT資産・ライセンス管理システム『Snipe-IT』

コンピュータビジョンの技術マップ

Model View Controller

C++ 標準テンプレートライブラリ (STL)

ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始める

TorchStudio:PyTorchのための統合開発環境とエコシステム

MVStudio:オープンソースのPhotogrammetryツール

Maya LTでFBIK(Full Body IK)

オープンソースの顔の動作解析ツールキット『OpenFace』

Amazon Web ServicesでWordPress

Stanford Bunny

3Dモデルを立体視で確認できるVRアプリを作っている

今年もSSII

SONYの自律型エンタテインメントロボット『aibo』

『PIXARのひみつ展』に行ってきた

Structure from Motion (多視点画像からの3次元形状復元)

Konashiを買った

1枚の画像からマテリアルを作成できる無料ツール『Materialize』

ZBrushで仮面ライダーBLACK SUNを作る 頭部~バストの概形

ZBrushでアヴァン・ガメラを作ってみる 脚のトゲの作り直し

WordPressプラグインの作り方

ZBrushで手首のモデリングをリファイン

Phongの表現力パネェ 材質別のPhong Shader用パラメータ一覧

adskShaderSDK

cvui:OpenCVのための軽量GUIライブラリ

映画『ミュータント・タートルズ』を観てきた

コメント