機械学習用の画像データをCGで生成するのもData Augmentation(データ拡張)の範疇でしょうか。
物体や風景画像だけでなく、Depthや物体ラベル、Semantic Segmentation用のアノテーション画像も必要となると、CGで生成した方が断然楽ですね。
機械学習用の画像を生成するUnreal Engine用のプラグインもありましたが
Blenderで学習画像をバッチ生成できるPython製のコマンドツールが公開されている↓
BlenderProc
ディープラーニング用の学習画像を生成するためのプロシージャルBlenderパイプラインです。
詳細はarXivにある論文をご覧ください。(随時更新しています)：https://arxiv.org/abs/1911.01911
対応するBlenderのバージョンは2.82。
設定をyaml形式で記述して、run.pyにyamlファイルや3Dオブジェクト、カメラ位置情報のファイルを引数に渡して実行するだけでBlenderで画像をレンダリングできるらしい。
yaml設定ファイルの書き方や、データの読み込み方はexamplesを真似すれば良さそう。
要するに、Blenderの細かい操作方法などを習得しなくても、各成分ごとに分解されたレンダリング画像をバッチで出力できるようにしたツールだな。
run.pyを読む限り、対応するOSはLinuxとMacだけで、Windowsには対応していないみたい。
2022年3月 追記：Google Researchからもツールが出ましたね↓
2023年 追記：Blenderのbpyモジュールをコンピュータービジョン用途で扱いやすいようにラップしたモジュールも↓
関連記事
Point Cloud Utils：Pythonで3D点群・...
2012のメイキングまとめ(途中)
3DCGのモデルを立体化するサービス
オープンソースのテクスチャマッピングシステム『Ptex』
Raspberry Pi 2を買いました
コンピュータビジョンの技術マップ
Physics Forests：機械学習で流体シミュレーショ...
Unityの薄い本
HD画質の無駄遣い
ヘッドマウントディスプレイとビジュアリゼーションの未来
Photogrammetry (写真測量法)
『スター・ウォーズ 最後のジェダイ』のVFXブレイクダウン ...
Human Generator：Blenderの人体生成アド...
OpenMVSのサンプルを動かしてみる
ZBrushでアヴァン・ガメラを作ってみる 頭頂部と首周りを...
TVML (TV program Making langua...
PyDataTokyo主催のDeep Learning勉強会
『スター・ウォーズ フォースの覚醒』のVFXブレイクダウン ...
Houdiniのライセンスの種類
UnrealCV：コンピュータビジョン研究のためのUnrea...
手を動かしながら学ぶデータマイニング
ブログが1日ダウンしてました
BlenderのGeometry Nodeで遊ぶ
Leap MotionでMaya上のオブジェクトを操作できる...
ROMOハッカソンに行ってきた
ROSの薄い本
色んな三面図があるサイト
TensorSpace.js：ニューラルネットワークの構造を...
Google App Engine上のWordPressでF...
Unity MonoBehaviourクラスのオーバーライド...
動的なメモリの扱い
Raspberry PiのGPIOを操作するPythonライ...
Iridescence：プロトタイピング向け軽量3D可視化ラ...
オープンソースのネットワーク可視化ソフトウェアプラットフォー...
C#で使える遺伝的アルゴリズムライブラリ『GeneticSh...
MPFB2：Blenderの人体モデリングアドオン
立体視を試してみた
Point Cloud Consortiumのセミナー「3D...
JavaScriptとかWebGLとかCanvasとか
ZBrushのキャンバスにリファレンス画像を配置する
Pythonのソースコードに特化した検索エンジン『Nulle...
Unreal Engine 5の情報が公開された！
コメント