BlenderProc:Blenderで機械学習用の画像データを生成するPythonツール

機械学習用の画像データをCGで生成するのもData Augmentationの範疇でしょうか。
物体や風景画像だけでなく、Depthや物体ラベル、Semantic Segmentation用のアノテーション画像も必要となると、CGで生成した方が断然楽ですね。

機械学習用の画像を生成するUnreal Engine用のプラグインもありましたが



Blenderで学習画像をバッチ生成できるPython製のコマンドツールが公開されている↓

BlenderProc



ディープラーニング用の学習画像を生成するためのプロシージャルBlenderパイプラインです。
詳細はarXivにある論文をご覧ください。(随時更新しています):https://arxiv.org/abs/1911.01911


スポンサーリンク

対応するBlenderのバージョンは2.82。


スポンサーリンク


設定をyaml形式で記述して、run.pyにyamlファイルや3Dオブジェクト、カメラ位置情報のファイルを引数に渡して実行するだけでBlenderで画像をレンダリングできるらしい。
yaml設定ファイルの書き方や、データの読み込み方はexamplesを真似すれば良さそう。

要するに、Blenderの細かい操作方法などを習得しなくても、各成分ごとに分解されたレンダリング画像をバッチで出力できるようにしたツールだな。
run.pyを読む限り、対応するOSはLinuxとMacだけで、Windowsには対応していないみたい。

2022年3月 追記:Google Researchからもツールが出ましたね↓
Kubric:機械学習用アノテーション付き動画生成パイプライン
久しぶりにコンピュータビジョン系の話題。Google Researchから機械学習用のアノテーション付き動画を生成するためのツールがオープンソースで公開された↓KubricKubricは、Instance Segmenta...


スポンサーリンク

関連記事

統計的な顔モデル
人間の顔をそっくりそのままCGで復元する『Digital Emily Project』
ZBrushでアヴァン・ガメラを作ってみる 歯を配置
マジョーラ
ZBrushでUndo Historyを動画に書き出す
Unityからkonashiをコントロールする
疑似3D写真が撮れるiPhoneアプリ『Seene』がアップデートでついにフル3Dモデルが撮影できる...
MythTV:Linuxでテレビの視聴・録画ができるオープンソースプロジェクト
ROMOハッカソンに行ってきた
Mayaのレンダリング アトリビュート
Siggraph Asia 2009 カンファレンスの詳細
スクラッチで既存のキャラクターを立体化したい
Facebookの顔認証技術『DeepFace』
openMVGをWindows10 Visual Studio 2015環境でビルドする
pythonの機械学習ライブラリ『scikit-learn』
ZBrushでアヴァン・ガメラを作ってみる 脚のポーズ調整
ジュラシック・パークの続編『ジュラシック・ワールド』
ZBrushで仮面ライダー3号を造る 仮面編 PolyGroupを分割する
ブログが1日ダウンしてました
pythonもかじってみようかと
フィーリングに基づくタマムシの質感表現
SculptrisとBlenderで作ったGodzilla 2014 (Fan Made)
複数画像から3次元形状を再構築するライブラリ『Multi-View Environment』
『ローグ・ワン/スター・ウォーズ・ストーリー』"あのキャラクター"のメイキング
ZBrushでゴジラ2001を作ってみる 側頭部のボリュームを探る
3Dスキャンしたテクスチャから照明を除去するUnityツール『De Lighting tool』
Pix2Pix:CGANによる画像変換
ゴジラの造形
CLO:服飾デザインツール
ジュラシック・パークのメイキング
OpenVDB:3Dボリュームデータ処理ライブラリ
MB-Lab:Blenderの人体モデリングアドオン
Model View Controller
Mayaでリアルな布の質感を作るチュートリアル
株式会社ヘキサドライブの研究室ページ
OpenCVで動画の手ぶれ補正
組み込み向けのWindows OS 『Windows Embedded』
OpenMayaRender
ラクガキの立体化 1年半ぶりの続き
『シン・ゴジラ』のコンセプトアニメーションのメイキング動画が公開された
ZBrushで仮面ライダー3号を造る 仮面編 PolyGroup作成に再挑戦
ZBrushで仮面ライダー3号を造る 仮面編 横顔のシルエットをリファレンスに合わせる

コメント