iOSで使えるJetpac社の物体認識SDK『DeepBelief』

iOSだけじゃなく、Android, Linux, OS Xで使える画像認識フレームワークで、iOSやAndroid, Raspberry Piでも動かせるほど軽量らしい。


この記事で知った。↓

学習するスマホアプリ:画像を分析し、物を識別するシステム

Screenshot of wired.jp

記事だとRomoの写真が載ってるね。
このDeepBeliefはSDKがGitHub上に上がっている。→DeepBeliefSDK



難しいことがまだ理解できてないんだけど、このSDKはDeep LearningのConvolutional Neural Networksという手法を使った物体認識を実装したものらしい。OpenCVとの連携も簡単にできるそうです。

This is a framework implementing the convolutional neural network architecture described by Alex Krizhevsky, Ilya Sutskever, and Geoffrey Hinton.

The processing code has been highly optimized to run within the memory and processing constraints of modern mobile devices, and can analyze an image in under 300ms on an iPhone 5S. It’s also easy to use together with OpenCV.

We’re releasing this framework because we’re excited by the power of this approach for general image recognition, especially when it can run locally on low-power devices. It gives your phone the ability to see, and I can’t wait to see what applications that helps you build.

そして、すでにiOS版を試した人がQiitaに記事を書いてる。↓

Deep Belief SDK サンプルで嵌った点

で、オイラもサンプルコードのビルドを試してみたんだけど、Qiitaの記事みたいに例外で躓くこともなく、すんなりビルドできた。
オイラの環境はxcode5.1でiPhone5S。フレームワークのパスとプロビジョニングの設定だけ自分で直したら普通にビルドできたよ。
オイラが試したのは以下の3つのサンプル。
LearningExample
SavedModelExample
SimpleiOS

あ、ていうかRomoExampleってのがある!Romoでも遊べるのか。ハッカソンの成果を試す時が来たな。


DeepBeliefはこちらの資料でも少し紹介されていますね。

以下、SimpleiOSで物体認識を試してみたスクリーンショット

ゴジラカップG博ポスター

ミレゴジミレゴジ_2

純金ゴジラミッドタウンゴジラ_1

ミッドタウンゴジラ_2ミッドタウンゴジラ_3ミッドタウンゴジラ_4

7/26追記:デモビデオ見つけた↓




関連記事

ビリケン商会 メカゴジラⅡ 眼の注型

映画『ゴジラ-1.0』のティザー映像!

Rerun:マルチモーダルデータの可視化アプリとSDK

OpenCV 3.1のsfmモジュールを試す

MythTV:Linuxでテレビの視聴・録画ができるオープンソースプロジェクト

ビリケン商会 メカゴジラⅡ 眼の型取り 再挑戦

Unreal EngineでARKit 3.0

海洋堂 20cmシリーズ『キンゴジ』 気泡のパテ埋め

BlenderのPython環境にPyTorchをインストールする

『特撮のDNA』を見てきた

OpenCVの超解像(SuperResolution)モジュールを試す

Mask R-CNN:ディープラーニングによる一般物体検出・Instance Segmentatio...

Raspberry Pi 2のGPIOピン配置

TeleSculptor:空撮動画からPhotogrammetryするツール

海洋堂 20cmシリーズ『モスゴジ』 失敗箇所のレタッチ

全脳アーキテクチャ勉強会

海洋堂 20cmシリーズ『キンゴジ』 眼の塗装

PythonのHTML・XMLパーサー『BeautifulSoup』

オープンソースの顔認識フレームワーク『OpenBR』

iPhone 3GSがますます欲しくなる動画

海洋堂 20cmシリーズ『モスゴジ』 背びれ・眼の塗装

酒井ゆうじ造型工房『20cm ビオゴジ出現』の塗装再開

Verilog HDL

スマホでカラーチューニングできるペンライト『KING BLADE X10 III』

『GODZILLA ゴジラ』のBlu-Rayを買った

海洋堂 20cmシリーズ『キンゴジ』 口の塗装と接着

2021年 観に行った映画振り返り

TensorFlowでCGを微分できる『TensorFlow Graphics』

UnityのMonoBehaviourクラスをシングルトン化する

小説『GODZILLA プロジェクト・メカゴジラ』読了(ネタバレ無し)

ビリケン商会 メカゴジラⅡ 眼の2次原型と頭のすり合わせ

ゴジラ2000ミレニアムの口の中の塗装

ビリケン商会 メカゴジラⅡ 眼の型取り

Alice Vision:オープンソースのPhotogrammetryフレームワーク

Polyscope:3Dデータ操作用GUIライブラリ

ディープラーニング

CGAN (Conditional GAN):条件付き敵対的生成ネットワーク

今年も怪獣大進撃

オープンソースの物理ベースGIレンダラ『appleseed』

海洋堂 20cmシリーズ『デスゴジ』 クリアーオレンジVer. 頭部パーツの加工

C++始めようと思うんだ

R-CNN (Regions with CNN features):ディープラーニングによる一般物体...

コメント