機械学習用の画像データをCGで生成するのもData Augmentation(データ拡張)の範疇でしょうか。
物体や風景画像だけでなく、Depthや物体ラベル、Semantic Segmentation用のアノテーション画像も必要となると、CGで生成した方が断然楽ですね。
機械学習用の画像を生成するUnreal Engine用のプラグインもありましたが
Blenderで学習画像をバッチ生成できるPython製のコマンドツールが公開されている↓
BlenderProc
ディープラーニング用の学習画像を生成するためのプロシージャルBlenderパイプラインです。
詳細はarXivにある論文をご覧ください。(随時更新しています)：https://arxiv.org/abs/1911.01911
対応するBlenderのバージョンは2.82。
設定をyaml形式で記述して、run.pyにyamlファイルや3Dオブジェクト、カメラ位置情報のファイルを引数に渡して実行するだけでBlenderで画像をレンダリングできるらしい。
yaml設定ファイルの書き方や、データの読み込み方はexamplesを真似すれば良さそう。
要するに、Blenderの細かい操作方法などを習得しなくても、各成分ごとに分解されたレンダリング画像をバッチで出力できるようにしたツールだな。
run.pyを読む限り、対応するOSはLinuxとMacだけで、Windowsには対応していないみたい。
2022年3月 追記：Google Researchからもツールが出ましたね↓
2023年 追記：Blenderのbpyモジュールをコンピュータービジョン用途で扱いやすいようにラップしたモジュールも↓
関連記事
UnrealCLR：Unreal Engineで.NET C...
機械学習に役立つPythonライブラリ一覧
世界一下品なクマと世界一紳士なクマ
イタリアの自動車ブランドFiatとゴジラがコラボしたCMのメ...
画像認識による位置情報取得 - Semi-Direct Mo...
ZBrushでアヴァン・ガメラを作ってみる モールドの彫り込...
PyTorch3D：3Dコンピュータービジョンライブラリ
OpenGV：画像からカメラの3次元位置・姿勢を推定するライ...
MPC社によるゴジラ(2014)のVFXブレイクダウン
マイケル・ベイの動画の感覚
Unreal Engineの薄い本
『ピクサー展』へ行ってきた
LLM Visualization：大規模言語モデルの可視化
粘土をこねるようなスカルプトモデリング
bpy-renderer：レンダリング用Pythonパッケー...
ちょっと凝り過ぎなWebキャンペーン：全日本バーベイタム選手...
ZBrush 4R8 リリース！
Mitsuba 3：オープンソースの研究向けレンダラ
Unity MonoBehaviourクラスのオーバーライド...
WinSCP
Photoshopで作る怪獣特撮チュートリアル
Iridescence：プロトタイピング向け軽量3D可視化ラ...
フォトンの放射から格納までを可視化した動画
ZBrushでアヴァン・ガメラを作ってみる 脚のポーズ調整
Math Inspector：科学計算向けビジュアルプログラ...
写真から3Dメッシュの生成・編集ができる無料ツール『Auto...
Multi-View Environment：複数画像から3...
第20回 文化庁メディア芸術祭『3DCG表現と特撮の時代』
Google App Engine上のWordPressでA...
ガメラ生誕50周年
トランスフォーマー ：リベンジのメイキング (デジタルドメイ...
ブログが1日ダウンしてました
WordPressプラグインによるサイトマップの自動生成
書籍『OpenCV 3 プログラミングブック』を購入
『スター・ウォーズ/スカイウォーカーの夜明け』のVFXブレイ...
Autodesk Mementoでゴジラを3次元復元する
iOSデバイスと接続して連携するガジェットの開発方法
UnityでLight Shaftを表現する
OpenCV
ZBrushでアヴァン・ガメラを作ってみる 甲羅のバランス調...
畳み込みニューラルネットワーク (CNN: Convolut...
Accord.NET Framework：C#で使える機械学...
コメント