BlenderProc:Blenderで機械学習用の画像データを生成するPythonツール

機械学習用の画像データをCGで生成するのもData Augmentation(データ拡張)の範疇でしょうか。
物体や風景画像だけでなく、Depthや物体ラベル、Semantic Segmentation用のアノテーション画像も必要となると、CGで生成した方が断然楽ですね。

機械学習用の画像を生成するUnreal Engine用のプラグインもありましたが



Blenderで学習画像をバッチ生成できるPython製のコマンドツールが公開されている↓

BlenderProc



ディープラーニング用の学習画像を生成するためのプロシージャルBlenderパイプラインです。
詳細はarXivにある論文をご覧ください。(随時更新しています):https://arxiv.org/abs/1911.01911

対応するBlenderのバージョンは2.82。



設定をyaml形式で記述して、run.pyにyamlファイルや3Dオブジェクト、カメラ位置情報のファイルを引数に渡して実行するだけでBlenderで画像をレンダリングできるらしい。
yaml設定ファイルの書き方や、データの読み込み方はexamplesを真似すれば良さそう。

要するに、Blenderの細かい操作方法などを習得しなくても、各成分ごとに分解されたレンダリング画像をバッチで出力できるようにしたツールだな。
run.pyを読む限り、対応するOSはLinuxとMacだけで、Windowsには対応していないみたい。

2022年3月 追記:Google Researchからもツールが出ましたね↓



2023年 追記:Blenderのbpyモジュールをコンピュータービジョン用途で扱いやすいようにラップしたモジュールも↓
Blendify:コンピュータービジョン向けBlenderラッパー
コンピュータービジョンで扱う対象が2Dの画像だけでなく3Dデータに広がってきて、コンピューターグラフィックスとの垣根がどんどん無くなってきているように感じる。Blendifyは、Blenderの機能をPythonのモジュールとして呼び出せる...

関連記事

NumSharp:C#で使えるNumPyライクな数値計算ライ...

ZBrushでアマビエを作る その2

iPhone・iPod touchで動作する知育ロボット『R...

Windows Server 2008にAutodesk M...

『パシフィック・リム: アップライジング』のVFXブレイクダ...

OpenCV3.3.0でsfmモジュールのビルドに成功!

iOSデバイスのためのフィジカル・コンピューティングツールキ...

ZBrushで仮面ライダー3号を造る 仮面編 Clay Po...

BlenderでPhotogrammetryできるアドオン

OpenGVの用語

DUSt3R:3Dコンピュータービジョンの基盤モデル

iPhone欲しいなぁ

CreativeCOW.net

SDカードサイズのコンピューター『Intel Edison』

チャットツール用bot開発フレームワーク『Hubot』

ZBrushのUV MasterでUV展開

粘土をこねるようなスカルプトモデリング

ROMOハッカソンに行ってきた

CGのためのディープラーニング

Javaで作られたオープンソースの3DCGレンダラ『Sunf...

OpenCVでPhotoshopのプラグイン開発

Unreal Engineの薄い本

MLDemos:機械学習について理解するための可視化ツール

WordPressのテーマを自作する

機械学習での「回帰」とは?

PureRef:リファレンス画像専用ビューア

UnityでOpenCVを使うには?

ZBrushでUndo Historyを動画に書き出す

Raspberry PiでIoTごっこ

ZBrushでアヴァン・ガメラを作ってみる パーツ分割

映画『ゴジラ-1.0』 メイキング情報まとめ

Rerun:マルチモーダルデータの可視化アプリとSDK

LLM Visualization:大規模言語モデルの可視化

第1回 3D勉強会@関東『SLAMチュートリアル大会』

Texturing & Modeling A Pro...

OpenCVのfindEssentialMat関数を使ったサ...

フリーのUV展開ツール Roadkill UV Tool

映画『シン・仮面ライダー』 メイキング情報まとめ

PythonのHTML・XMLパーサー『BeautifulS...

『PIXARのひみつ展』に行ってきた

ZBrushでゴジラ2001を作ってみる 身体のSubToo...

Konashiを買った

コメント