機械学習用の画像データをCGで生成するのもData Augmentation(データ拡張)の範疇でしょうか。
物体や風景画像だけでなく、Depthや物体ラベル、Semantic Segmentation用のアノテーション画像も必要となると、CGで生成した方が断然楽ですね。
機械学習用の画像を生成するUnreal Engine用のプラグインもありましたが
Blenderで学習画像をバッチ生成できるPython製のコマンドツールが公開されている↓
BlenderProc
ディープラーニング用の学習画像を生成するためのプロシージャルBlenderパイプラインです。
詳細はarXivにある論文をご覧ください。(随時更新しています)：https://arxiv.org/abs/1911.01911
対応するBlenderのバージョンは2.82。
設定をyaml形式で記述して、run.pyにyamlファイルや3Dオブジェクト、カメラ位置情報のファイルを引数に渡して実行するだけでBlenderで画像をレンダリングできるらしい。
yaml設定ファイルの書き方や、データの読み込み方はexamplesを真似すれば良さそう。
要するに、Blenderの細かい操作方法などを習得しなくても、各成分ごとに分解されたレンダリング画像をバッチで出力できるようにしたツールだな。
run.pyを読む限り、対応するOSはLinuxとMacだけで、Windowsには対応していないみたい。
2022年3月 追記：Google Researchからもツールが出ましたね↓
2023年 追記：Blenderのbpyモジュールをコンピュータービジョン用途で扱いやすいようにラップしたモジュールも↓
関連記事
サンプルコードにも間違いはある？
ZBrushでアマビエを作る その2
マルコフ連鎖モンテカルロ法
ブログのデザイン変えました
ハリウッド版「GAIKING」パイロット映像
Texturing & Modeling A Pro...
UnrealCV：コンピュータビジョン研究のためのUnrea...
オープンソースの顔認識フレームワーク『OpenBR』
SIGGRAPH Asia
ZBrushで基本となるブラシ
JavaによるCGプログラミング入門サイト (日本語)
書籍『ゼロから作るDeep Learning』で自分なりに学...
PythonでMayaのShapeノードプラグインを作る
OpenMayaRender
2D→3D復元技術で使われる用語まとめ
PolyPaint
疑似3D写真が撮れるiPhoneアプリ『Seene』がアップ...
ZBrushでアヴァン・ガメラを作ってみる 歯茎を別パーツへ...
Subsurface scatteringの動画
RSSフィードを読込んで表示するWordpressプラグイン...
Mask R-CNN：ディープラーニングによる一般物体検出・...
書籍『イラストで学ぶ ディープラーニング』
ポリ男からMetaHumanを作る
iPhoneで3D写真が撮れるアプリ『seene』
Web経由でRaspberry PiのGPIOを操作したい
Houdiniのライセンスの種類
OpenAR：OpenCVベースのマーカーARライブラリ
ZBrushで仮面ライダー3号を造る 仮面編 PolyGro...
オープンソースのロボットアプリケーションフレームワーク『RO...
trimesh：PythonでポリゴンMeshを扱うライブラ...
オープンソースのネットワーク可視化ソフトウェアプラットフォー...
ラクガキの立体化 反省
MFnMeshクラスのsplit関数
OpenCVのfindEssentialMat関数を使ったサ...
Faster R-CNN：ディープラーニングによる一般物体検...
画像生成AI Stable Diffusionで遊ぶ
3D復元技術の情報リンク集
日立のフルパララックス立体ディスプレイ
書籍『仕事ではじめる機械学習』を読みました
Cartographer：オープンソースのSLAMライブラリ
R-CNN (Regions with CNN featur...
BGSLibrary：OpenCVベースの背景差分ライブラリ
コメント