iOSで使えるJetpac社の物体認識SDK『DeepBelief』

iOSだけじゃなく、Android, Linux, OS Xで使える画像認識フレームワークで、iOSやAndroid, Raspberry Piでも動かせるほど軽量らしい。


この記事で知った。↓

学習するスマホアプリ:画像を分析し、物を識別するシステム

Screenshot of wired.jp

記事だとRomoの写真が載ってるね。
このDeepBeliefはSDKがGitHub上に上がっている。→DeepBeliefSDK



難しいことがまだ理解できてないんだけど、このSDKはDeep LearningのConvolutional Neural Networksという手法を使った物体認識を実装したものらしい。OpenCVとの連携も簡単にできるそうです。

This is a framework implementing the convolutional neural network architecture described by Alex Krizhevsky, Ilya Sutskever, and Geoffrey Hinton.

The processing code has been highly optimized to run within the memory and processing constraints of modern mobile devices, and can analyze an image in under 300ms on an iPhone 5S. It’s also easy to use together with OpenCV.

We’re releasing this framework because we’re excited by the power of this approach for general image recognition, especially when it can run locally on low-power devices. It gives your phone the ability to see, and I can’t wait to see what applications that helps you build.

そして、すでにiOS版を試した人がQiitaに記事を書いてる。↓

Deep Belief SDK サンプルで嵌った点

で、オイラもサンプルコードのビルドを試してみたんだけど、Qiitaの記事みたいに例外で躓くこともなく、すんなりビルドできた。
オイラの環境はxcode5.1でiPhone5S。フレームワークのパスとプロビジョニングの設定だけ自分で直したら普通にビルドできたよ。
オイラが試したのは以下の3つのサンプル。
LearningExample
SavedModelExample
SimpleiOS

あ、ていうかRomoExampleってのがある!Romoでも遊べるのか。ハッカソンの成果を試す時が来たな。


DeepBeliefはこちらの資料でも少し紹介されていますね。

以下、SimpleiOSで物体認識を試してみたスクリーンショット

ゴジラカップG博ポスター

ミレゴジミレゴジ_2

純金ゴジラミッドタウンゴジラ_1

ミッドタウンゴジラ_2ミッドタウンゴジラ_3ミッドタウンゴジラ_4

7/26追記:デモビデオ見つけた↓




関連記事

今年も怪獣大進撃

hloc:SuperGlueで精度を向上させたSfM実装

ブログの復旧が難航してた話

Windows10でPyTorchをインストールしてVSCodeで使う

OpenCV 3.1のsfmモジュールを試す

pythonもかじってみようかと

Russian3DScannerのトポロジー転送ツール『WrapX』

iOSデバイスと接続して連携するガジェットの開発方法

AR (Augmented Reality)とDR (Diminished Reality)

ZBrushでゴジラ2001を作ってみる 頭の概形作り

UnrealCLR:Unreal Engineで.NET Coreを利用できるプラグイン

ゴジラの日

UnityのMonoBehaviourクラスをシングルトン化する

映画『ゴジラ-1.0』を4DX SCREENで鑑賞 (ネタバレあり)

OpenGVのライブラリ構成

Runway ML:クリエイターのための機械学習ツール

新年の衝動買い

Qlone:スマホのカメラで3Dスキャンできるアプリ

映画『Godzilla: King of the Monsters』の予告編が公開された!

酒井ゆうじ造型工房『23cm シン・ゴジラ』 表面処理 その1

Pylearn2:ディープラーニングに対応したPythonの機械学習ライブラリ

Raspberry PiでIoTごっこ

AfterEffectsプラグイン開発

海洋堂 20cmシリーズ『84ゴジラ』 完成

OpenCVのバージョン3が正式リリースされたぞ

Unreal Engineの薄い本

Mayaのプラグイン開発

酒井ゆうじ造型工房『23cm シン・ゴジラ』 背びれの接着

UnityプロジェクトをGitHubで管理する

ゴジラ三昧

イタリアの自動車ブランドFiatとゴジラがコラボしたCMのメイキング

第1回 3D勉強会@関東『SLAMチュートリアル大会』

OpenCVで顔のランドマークを検出する『Facemark API』

ブログをGoogle App EngineからAmazon EC2へ移行

映画『GODZILLA 怪獣惑星』を観た (ネタバレ無し)

ビリケン商会 メカゴジラⅡ 眼をくり抜く

ゴジラ(2014)のメイキング

DensePose:画像中の人物表面のUV座標を推定する

『シン・ゴジラ』の感想 (ネタバレあり)

JavaScriptとかWebGLとかCanvasとか

LuxCoreRender:オープンソースの物理ベースレンダラ

ワンダーフェスティバル2016[夏]に行ってきた

コメント