iOSで使えるJetpac社の物体認識SDK『DeepBelief』

iOSだけじゃなく、Android, Linux, OS Xで使える画像認識フレームワークで、iOSやAndroid, Raspberry Piでも動かせるほど軽量らしい。


この記事で知った。↓

学習するスマホアプリ:画像を分析し、物を識別するシステム

Screenshot of wired.jp

記事だとRomoの写真が載ってるね。
このDeepBeliefはSDKがGitHub上に上がっている。→DeepBeliefSDK



難しいことがまだ理解できてないんだけど、このSDKはDeep LearningのConvolutional Neural Networksという手法を使った物体認識を実装したものらしい。OpenCVとの連携も簡単にできるそうです。

This is a framework implementing the convolutional neural network architecture described by Alex Krizhevsky, Ilya Sutskever, and Geoffrey Hinton.

The processing code has been highly optimized to run within the memory and processing constraints of modern mobile devices, and can analyze an image in under 300ms on an iPhone 5S. It’s also easy to use together with OpenCV.

We’re releasing this framework because we’re excited by the power of this approach for general image recognition, especially when it can run locally on low-power devices. It gives your phone the ability to see, and I can’t wait to see what applications that helps you build.

そして、すでにiOS版を試した人がQiitaに記事を書いてる。↓

Deep Belief SDK サンプルで嵌った点

で、オイラもサンプルコードのビルドを試してみたんだけど、Qiitaの記事みたいに例外で躓くこともなく、すんなりビルドできた。
オイラの環境はxcode5.1でiPhone5S。フレームワークのパスとプロビジョニングの設定だけ自分で直したら普通にビルドできたよ。
オイラが試したのは以下の3つのサンプル。
LearningExample
SavedModelExample
SimpleiOS

あ、ていうかRomoExampleってのがある!Romoでも遊べるのか。ハッカソンの成果を試す時が来たな。


DeepBeliefはこちらの資料でも少し紹介されていますね。

以下、SimpleiOSで物体認識を試してみたスクリーンショット

ゴジラカップG博ポスター

ミレゴジミレゴジ_2

純金ゴジラミッドタウンゴジラ_1

ミッドタウンゴジラ_2ミッドタウンゴジラ_3ミッドタウンゴジラ_4

7/26追記:デモビデオ見つけた↓




関連記事

PGGAN:段階的に解像度を上げて学習を進めるGAN

ZBrushでゴジラ2001を作ってみる 姿勢の変更

Houdiniのライセンスの種類

書籍『イラストで学ぶ ディープラーニング』

OpenCV3.3.0でsfmモジュールのビルドに成功!

海洋堂 20cmシリーズ『デスゴジ』 クリアーオレンジVer. 洗浄・煮沸

iPhone 13 Pro→ iPhone 15 Pro

ゴジラ2000ミレニアムの眼の塗装

初代ゴジラもS.H.MonsterArts化!

iPhoneをSSHクライアントとして使う

OpenCV 3.1のsfmモジュールを試す

CGALDotNet:計算幾何学ライブラリ CGALのC#ラッパー

オープンソースのロボットアプリケーションフレームワーク『ROS (Robot Operating S...

Google XML Sitemap Generatorプラグインを3.4.1へダウングレード

口笛から作曲できるスマホアプリ『Chordana Composer』

Model View Controller

WordPressプラグインの作り方

RSSフィードを読込んで表示するWordpressプラグイン『RSSImport』

映画『ゴジラ-1.0』のティザー映像!

オープンソースの取引プラットフォーム

ガレージキットのフィニッシャー

アニメーション映画『GODZILLA』

ManimML:機械学習の概念を視覚的に説明するためのライブラリ

OpenGVの用語

LLM Visualization:大規模言語モデルの可視化

7月にNHK BSプレミアムでゴジラ映画が放送されるぞ

NeRF (Neural Radiance Fields):深層学習による新規視点合成

Mayaのプラグイン開発

ビリケン商会 メカゴジラⅡ 眼の2次原型を作る

シン・ゴジラの最新予告篇映像が解禁されたぞ!

組み込み向けのWindows OS 『Windows Embedded』

S.H.MonsterArts 輝響曲 ゴジラ(1989)

ゴジラ(2014)のメイキング

今年も怪獣大進撃

Structure from Motion (多視点画像からの3次元形状復元)

Theia:オープンソースのStructure from Motionライブラリ

酒井ゆうじ造型工房『20cm ビオゴジ出現』 爪の塗装 やり直し

GODZILLAの映画PR用等身大フィギュアのメイキング記事

ZBrushで作った3Dモデルを立体視で確認できるVRアプリを作る

Unityの各コンポーネント間でのやり取り

海洋堂 20cmシリーズ『84ゴジラ』 眼・口の周りのレタッチ

ワンダーフェスティバル2016[冬]に行ってきた

コメント