サイトアイコン NegativeMindException

BlenderProc:Blenderで機械学習用の画像データを生成するPythonツール

機械学習用の画像データをCGで生成するのもData Augmentationの範疇でしょうか。
物体や風景画像だけでなく、Depthや物体ラベル、Semantic Segmentation用のアノテーション画像も必要となると、CGで生成した方が断然楽ですね。

機械学習用の画像を生成するUnreal Engine用のプラグインもありましたが



Blenderで学習画像をバッチ生成できるPython製のコマンドツールが公開されている↓

BlenderProc



ディープラーニング用の学習画像を生成するためのプロシージャルBlenderパイプラインです。
詳細はarXivにある論文をご覧ください。(随時更新しています):https://arxiv.org/abs/1911.01911


スポンサーリンク

対応するBlenderのバージョンは2.82。



設定をyaml形式で記述して、run.pyにyamlファイルや3Dオブジェクト、カメラ位置情報のファイルを引数に渡して実行するだけでBlenderで画像をレンダリングできるらしい。
yaml設定ファイルの書き方や、データの読み込み方はexamplesを真似すれば良さそう。

要するに、Blenderの細かい操作方法などを習得しなくても、各成分ごとに分解されたレンダリング画像をバッチで出力できるようにしたツールだな。
run.pyを読む限り、対応するOSはLinuxとMacだけで、Windowsには対応していないみたい。

2022年3月 追記:Google Researchからもツールが出ましたね↓



2023年 追記:Blenderのbpyモジュールをコンピュータービジョン用途で扱いやすいようにラップしたモジュールも↓
Blendify:コンピュータービジョン向けBlenderラッパー
コンピュータービジョンで扱う対象が2Dの画像だけでなく3Dデータに広がってきて、コンピューターグラフィックスとの垣根がどんどん無くなってきているように感じる。 Blendifyは、Blenderの機能をPythonのモジュールとして呼び出せ...


スポンサーリンク

関連記事

  • COLMAP:オープンソースのSfM・MVSツール
  • 機械学習に役立つPythonライブラリ一覧
  • Texturing & Modeling A Procedural ApproachをGoo...
  • 参考になりそうなサイト
  • Unity Scriptコーディング→Unreal Engine Scriptコーディング
  • ZBrush 4R7
  • JavaによるCGプログラミング入門サイト (日本語)
  • MVStudio:オープンソースのPhotogrammetryツール
  • ZBrushでゴジラ2001を作ってみる 身体のアタリを作る
  • AndroidもopenGLも初心者さ (でもJavaは知ってるよ)
  • この連休でZBrushの スキルアップを…
  • iPhone x ロボットハッカソン~RomoのiPhone用SDKで目覚ましアプリを作る~
  • 仮想関数
  • RefineNet (Multi-Path Refinement Network):ディープラーニン...
  • FacebookがDeep learningツールの一部をオープンソース化
  • Adobe MAX 2015
  • NICOGRAPHって有名?
  • ZBrushのお勉強
  • 無料で使える人体3DCG作成ツール
  • 書籍『3次元コンピュータビジョン計算ハンドブック』を購入
  • Unityの各コンポーネント間でのやり取り
  • デザインのリファイン再び
  • uGUI:Unityの新しいGUI作成システム
  • Webスクレイピングの勉強会に行ってきた
  • 『PIXARのひみつ展』に行ってきた
  • ZBrushでアヴァン・ガメラを作ってみる 脚のトゲの作り直し
  • Alice Vision:オープンソースのPhotogrammetryフレームワーク
  • Blenderでよく使うaddon
  • GoB:ZBrushとBlenderを連携させるアドオン
  • iPhoneアプリ開発 Xcode 5のお作法
  • Mask R-CNN:ディープラーニングによる一般物体検出・Instance Segmentatio...
  • Google Colaboratoryで遊ぶ準備
  • OpenCV
  • サンプルコードにも間違いはある?
  • GAN (Generative Adversarial Networks):敵対的生成ネットワーク
  • ラクガキの立体化 胴体の追加
  • 『ローグ・ワン/スター・ウォーズ・ストーリー』"あのキャラクター"のメイキング
  • PythonでMayaのShapeノードプラグインを作る
  • ZBrushと液晶ペンタブレットでドラゴンをモデリングするチュートリアル動画
  • ZBrushで人型クリーチャー
  • PCA (主成分分析)
  • イタリアの自動車ブランドFiatとゴジラがコラボしたCMのメイキング
  • モバイルバージョンを終了