機械学習用の画像データをCGで生成するのもData Augmentation(データ拡張)の範疇でしょうか。
物体や風景画像だけでなく、Depthや物体ラベル、Semantic Segmentation用のアノテーション画像も必要となると、CGで生成した方が断然楽ですね。
機械学習用の画像を生成するUnreal Engine用のプラグインもありましたが
Blenderで学習画像をバッチ生成できるPython製のコマンドツールが公開されている↓
BlenderProc
ディープラーニング用の学習画像を生成するためのプロシージャルBlenderパイプラインです。
詳細はarXivにある論文をご覧ください。(随時更新しています)：https://arxiv.org/abs/1911.01911
対応するBlenderのバージョンは2.82。
設定をyaml形式で記述して、run.pyにyamlファイルや3Dオブジェクト、カメラ位置情報のファイルを引数に渡して実行するだけでBlenderで画像をレンダリングできるらしい。
yaml設定ファイルの書き方や、データの読み込み方はexamplesを真似すれば良さそう。
要するに、Blenderの細かい操作方法などを習得しなくても、各成分ごとに分解されたレンダリング画像をバッチで出力できるようにしたツールだな。
run.pyを読む限り、対応するOSはLinuxとMacだけで、Windowsには対応していないみたい。
2022年3月 追記：Google Researchからもツールが出ましたね↓
2023年 追記：Blenderのbpyモジュールをコンピュータービジョン用途で扱いやすいようにラップしたモジュールも↓
関連記事
機械学習について最近知った情報
OpenCVで平均顔を作るチュートリアル
3Dスキャンに基づくプロシージャルフェイシャルアニメーション
Point Cloud Libraryに動画フォーマットが追...
写真に3Dオブジェクトを違和感無く合成する『3DPhotoM...
フルCGのウルトラマン！？
統計的な顔モデル
単純に遊びに行くのはだめなのか？
Boost オープンソースライブラリ
Adobe Photoshop CS5の新機能
プロシージャル手法に特化した本が出てるみたい(まだ買わないけ...
iPhoneアプリ開発 Xcode 5のお作法
Deep Fluids：流体シミュレーションをディープラーニ...
このブログのデザインに飽きてきた
ZBrushで仮面ライダー3号を造る 仮面編 ZRemesh...
OpenCVで顔のランドマークを検出する『Facemark ...
3Dスキャンしたテクスチャから照明を除去するUnityツール...
書籍『The Art of Mystical Beasts』...
ZBrushでゴジラ2001を作ってみる 身体のアタリを作る
ゴジラ(2014)のメイキング
ZBrushでアヴァン・ガメラを作ってみる 甲羅のバランス調...
Amazon EC2ログイン用の秘密鍵を無くした場合の対処方...
OpenCVのバージョン3が正式リリースされたぞ
3分の動画でプログラミングを学習できるサイト『ドットインスト...
Transformer Explainer：テキスト生成モデ...
ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始...
VCG Library：C++のポリゴン操作ライブラリ
Stanford Bunny
NVIDIA GeForce RTX 3080を購入
ZBrushでゴジラ2001を作ってみる 身体のシルエット出...
3DCG Meetup #4に行ってきた
ラクガキの立体化 分割ラインの変更・バランス調整
Fast R-CNN：ディープラーニングによる一般物体検出手...
OpenCVでPhotoshopのプラグイン開発
BSDF： (Bidirectional scatterin...
PeopleSansPeople：機械学習用の人物データをU...
FCN (Fully Convolutional Netwo...
RefineNet (Multi-Path Refineme...
UnityのTransformクラスについて調べてみた
書籍『イラストで学ぶ ディープラーニング』
アニゴジ関連情報
WordPressのテーマを自作する
コメント