機械学習用の画像データをCGで生成するのもData Augmentation(データ拡張)の範疇でしょうか。
物体や風景画像だけでなく、Depthや物体ラベル、Semantic Segmentation用のアノテーション画像も必要となると、CGで生成した方が断然楽ですね。
機械学習用の画像を生成するUnreal Engine用のプラグインもありましたが
Blenderで学習画像をバッチ生成できるPython製のコマンドツールが公開されている↓
BlenderProc
ディープラーニング用の学習画像を生成するためのプロシージャルBlenderパイプラインです。
詳細はarXivにある論文をご覧ください。(随時更新しています)：https://arxiv.org/abs/1911.01911
対応するBlenderのバージョンは2.82。
設定をyaml形式で記述して、run.pyにyamlファイルや3Dオブジェクト、カメラ位置情報のファイルを引数に渡して実行するだけでBlenderで画像をレンダリングできるらしい。
yaml設定ファイルの書き方や、データの読み込み方はexamplesを真似すれば良さそう。
要するに、Blenderの細かい操作方法などを習得しなくても、各成分ごとに分解されたレンダリング画像をバッチで出力できるようにしたツールだな。
run.pyを読む限り、対応するOSはLinuxとMacだけで、Windowsには対応していないみたい。
2022年3月 追記：Google Researchからもツールが出ましたね↓
2023年 追記：Blenderのbpyモジュールをコンピュータービジョン用途で扱いやすいようにラップしたモジュールも↓
関連記事
フルCGのウルトラマン！？
Raspberry PiのGPIOを操作するPythonライ...
画像認識による位置情報取得 - Semi-Direct Mo...
Iterator
CGのためのディープラーニング
html5のcanvasの可能性
WinSCP
PyMC：Pythonのベイズ統計ライブラリ
PCA (主成分分析)
ArUco：OpenCVベースのコンパクトなARライブラリ
Rerun：マルチモーダルデータの可視化アプリとSDK
ManimML：機械学習の概念を視覚的に説明するためのライブ...
Pythonのソースコードに特化した検索エンジン『Nulle...
CreativeCOW.net
ニューラルネットワークで画像分類
hloc：SuperGlueで精度を向上させたSfM・Vis...
シン・ゴジラのファンアート
Maya LTでFBIK(Full Body IK)
Unreal Engine 5の情報が公開された！
Konashiを買った
海外ドラマのChromaKey
UnityでLight Shaftを表現する
Python2とPython3
世界一下品なクマと世界一紳士なクマ
なんかすごいサイト
OpenAR：OpenCVベースのマーカーARライブラリ
JavaによるCGプログラミング入門サイト (日本語)
SegNet：ディープラーニングによるSemantic Se...
2D→3D復元技術で使われる用語まとめ
AfterEffectsプラグイン開発
ファンの力
SculptrisとBlenderで作ったGodzilla ...
Autodesk Mementoでゴジラを3次元復元する
クラスの基本
オープンソースの人体モデリングツール『MakeHuman』の...
顔画像処理技術の過去の研究
畳み込みニューラルネットワーク (CNN: Convolut...
OpenCVのバージョン3が正式リリースされたぞ
OpenMayaのPhongShaderクラス
HD画質の無駄遣い
Managing Software Requirements...
タマムシっぽい質感
コメント