2台以上のWebカメラを使ってマーカーレスの3Dモーションキャプチャを実現するオープンソースソフトウェアを開発するプロジェクト。
The FreeMoCap Project
Free Motion Capture (FreeMoCap)システムは、最先端のマーカーレスモーションキャプチャソフトウェア(OpenPoseやDeepLabCutなど)を活用し、3Dキネマティック再構築をワンクリックで実現できる合理的なパイプラインを提供します。
このシステムは任意のカメラハードウェアで動作し、複数の(USB Webカメラなどの)有線カメラでの同期録画だけでなく、別途用意した(GoProなどの)カメラで撮影した後の同期方法も提供します。
FreeMoCap Projectは使いやすさを重視しており、技術的なトレーニングや外部の支援抜きに、14歳の子供でも100ドル未満の予算で研究レベルのモーションキャプチャシステムを再現できることを目標としています。
ソースコードはGitHubにある。
プロジェクト名に”Free”と付いていてライセンスはAGPL3となっているけど、OpenPoseに依存しているらしいので、商用利用する場合はOpenPoseのライセンス元に問い合わせる必要がありそう。(OpenPoseはアカデミックと非商用利用についてのみ無料)
それとも、今後はOpenPoseに依存しなくなるということでしょうか。
インストール方法を読む限り、複数カメラの空間合わせにはOpenCVのArUcoを使うみたいだな。
Blender用のプラグインも準備中とのことです↓
Correction – @Blender plugin available *soon*
I have a janky version that works with an older iteration of @freemocap. Just need to clean it up and update it to work with the new versioN! https://t.co/lA8Gz4cBRs
— Jon Matthis (@JonMatthis) July 26, 2021
複数視点の動画から人間の3D姿勢を推定するアプローチは年々進化しているし、このプロジェクトの実装もまた変わっていくかもな。
関連記事
Mixamo：人型3Dキャラクターアニメーション制作サービス
Windows10でPyTorchをインストールしてVSCo...
SIGGRAPH ASIAのマスコット
3Dスキャンしたテクスチャから照明を除去するUnityツール...
トランスフォーマーロストエイジのメイキング
Google Earth用の建物を簡単に作れるツール Goo...
CycleGAN：ドメイン関係を学習した画像変換
マルコフ連鎖モンテカルロ法
C++の抽象クラス
Oculus Goを購入！
Pix2Pix：CGANによる画像変換
PyMC：Pythonのベイズ統計ライブラリ
ニューラルネットワークで画像分類
網元AMIで作ったWordpressサイトのインスタンスをt...
JavaScriptとかWebGLとかCanvasとか
機械学習のオープンソースソフトウェアフォーラム『mloss(...
UnityのGameObjectの向きをScriptで制御す...
マジョーラ
Mayaのポリゴン分割ツールの進化
AndroidもopenGLも初心者さ (でもJavaは知っ...
Super Resolution：OpenCVの超解像処理モ...
Human Generator：Blenderの人体生成アド...
Web経由でRaspberry PiのGPIOを操作したい
Pythonの自然言語処理ライブラリ『NLTK(Natura...
mentalrayのSubsurface Scatterin...
Unityで強化学習できる『Unity ML-Agents』
OpenMVSのサンプルを動かしてみる
注文してた本が届いた
ハリウッド版「GAIKING」パイロット映像
ZBrushでアヴァン・ガメラを作ってみる 下アゴと頭部を作...
Unreal Engine 5の情報が公開された！
アニゴジ関連情報
ZScript
ZBrush用トポロジー転送プラグイン『ZWrap Plug...
GAN (Generative Adversarial Ne...
Google Colaboratoryで遊ぶ準備
オープンソースの顔の動作解析ツールキット『OpenFace』
参考になりそうなサイト
顔追跡による擬似3D表示『Dynamic Perspecti...
ヘッドマウントディスプレイとビジュアリゼーションの未来
天体写真の3D動画
C#で使える遺伝的アルゴリズムライブラリ『GeneticSh...
コメント