機械学習用の画像データをCGで生成するのもData Augmentation(データ拡張)の範疇でしょうか。
物体や風景画像だけでなく、Depthや物体ラベル、Semantic Segmentation用のアノテーション画像も必要となると、CGで生成した方が断然楽ですね。
機械学習用の画像を生成するUnreal Engine用のプラグインもありましたが
Blenderで学習画像をバッチ生成できるPython製のコマンドツールが公開されている↓
BlenderProc
ディープラーニング用の学習画像を生成するためのプロシージャルBlenderパイプラインです。
詳細はarXivにある論文をご覧ください。(随時更新しています)：https://arxiv.org/abs/1911.01911
対応するBlenderのバージョンは2.82。
設定をyaml形式で記述して、run.pyにyamlファイルや3Dオブジェクト、カメラ位置情報のファイルを引数に渡して実行するだけでBlenderで画像をレンダリングできるらしい。
yaml設定ファイルの書き方や、データの読み込み方はexamplesを真似すれば良さそう。
要するに、Blenderの細かい操作方法などを習得しなくても、各成分ごとに分解されたレンダリング画像をバッチで出力できるようにしたツールだな。
run.pyを読む限り、対応するOSはLinuxとMacだけで、Windowsには対応していないみたい。
2022年3月 追記：Google Researchからもツールが出ましたね↓
2023年 追記：Blenderのbpyモジュールをコンピュータービジョン用途で扱いやすいようにラップしたモジュールも↓
関連記事
Adobe MAX 2015
サンプルコードにも間違いはある？
PGGAN：段階的に解像度を上げて学習を進めるGAN
マルコフ連鎖モンテカルロ法
WordPressプラグインによるサイトマップの自動生成
Phongの表現力パネェ 材質別のPhong Shader用...
ZBrushでアヴァン・ガメラを作ってみる おでこ(？)のバ...
ZBrushでアヴァン・ガメラを作ってみる 首回りの修正・脚...
ZBrushでアヴァン・ガメラを作ってみる 頭頂部の作り込み...
U-Net：ディープラーニングによるSemantic Seg...
PureRef：リファレンス画像専用ビューア
SDカードサイズのコンピューター『Intel Edison』
CreativeCOW.net
UnityからROSを利用できる『ROS#』
Googleが画像解析旅行ガイドアプリのJetpac社を買収
ROSでガンダムを動かす
Unreal Engine 5の情報が公開された！
Deep Fluids：流体シミュレーションをディープラーニ...
生物の骨格
ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始...
ジュラシック・パークのメイキング
ZBrushでゴジラ2001を作ってみる 身体のバランスを探...
Adobe Photoshop CS4 Extendedの3...
ZBrushでアヴァン・ガメラを作ってみる 下半身のバランス...
OpenCV 3.1とopencv_contribモジュール...
Point Cloud Libraryに動画フォーマットが追...
Windows10でPyTorchをインストールしてVSCo...
MLDemos：機械学習について理解するための可視化ツール
タダでRenderManを体験する方法
Facebookの顔認証技術『DeepFace』
データサイエンティストって何だ？
MPC社によるゴジラ(2014)のVFXブレイクダウン
ZBrushで基本となるブラシ
Python拡張モジュールのWindows用インストーラー配...
ZBrush 4R8 リリース！
顔のモデリング
FCN (Fully Convolutional Netwo...
UnityのAR FoundationでARKit 3
なんかすごいサイト
ポリ男からMetaHumanを作る
iOSデバイスのためのフィジカル・コンピューティングツールキ...
clearcoat Shader
コメント