2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
C++ 標準テンプレートライブラリ (STL)
Iridescence：プロトタイピング向け軽量3D可視化ラ...
OpenCVで動画の手ぶれ補正
OpenMVSのサンプルを動かしてみる
cvui：OpenCVのための軽量GUIライブラリ
OpenMayaのPhongShaderクラス
MeshLab：3Dオブジェクトの確認・変換に便利なフリーウ...
ZBrushで基本となるブラシ
MetaHumanの頭部をBlenderで編集できるアドオン
リメイク版ロボコップスーツのメイキング
布地のシワの法則性
Facebookの顔認証技術『DeepFace』
プロシージャル手法に特化した本が出てるみたい(まだ買わないけ...
トランスフォーマー/ロストエイジのメイキング
ラクガキの立体化 反省
BGSLibrary：OpenCVベースの背景差分ライブラリ
COLMAP：オープンソースのSfM・MVSツール
ブログのデザイン変えました
UnityでLight Shaftを表現する
池袋パルコで3Dのバーチャルフィッティング『ウェアラブル ク...
ZScript
映画『ゴジラ-1.0』 メイキング情報まとめ
Python2とPython3
MFnMeshクラスのsplit関数
Photoshopで作る怪獣特撮チュートリアル
Kubric：機械学習用アノテーション付き動画生成パイプライ...
iPhoneアプリ開発 Xcode 5のお作法
3Dグラフィックスの入門書
3Dモデルを立体視で確認できるVRアプリを作っている
WordPressの表示を高速化する
UnityからROSを利用できる『ROS#』
オープンソースの顔認識フレームワーク『OpenBR』
書籍『メイキング・オブ・ピクサー 創造力をつくった人々』を読...
Pix2Pix：CGANによる画像変換
Gource：バージョン管理の履歴を可視化するツール
ZBrushでアヴァン・ガメラを作ってみる 口内の微調整・身...
BlenderProc：Blenderで機械学習用の画像デー...
OpenCV 3.1のsfmモジュールのビルド再び
hloc：SuperGlueで精度を向上させたSfM・Vis...
ラクガキの立体化 モールドの追加
Iterator
iOSデバイスのためのフィジカル・コンピューティングツールキ...
コメント