iOSで使えるJetpac社の物体認識SDK『DeepBelief』

iOSだけじゃなく、Android, Linux, OS Xで使える画像認識フレームワークで、iOSやAndroid, Raspberry Piでも動かせるほど軽量らしい。


この記事で知った。↓

学習するスマホアプリ:画像を分析し、物を識別するシステム

Screenshot of wired.jp

記事だとRomoの写真が載ってるね。
このDeepBeliefはSDKがGitHub上に上がっている。→DeepBeliefSDK



難しいことがまだ理解できてないんだけど、このSDKはDeep LearningのConvolutional Neural Networksという手法を使った物体認識を実装したものらしい。OpenCVとの連携も簡単にできるそうです。

This is a framework implementing the convolutional neural network architecture described by Alex Krizhevsky, Ilya Sutskever, and Geoffrey Hinton.

The processing code has been highly optimized to run within the memory and processing constraints of modern mobile devices, and can analyze an image in under 300ms on an iPhone 5S. It’s also easy to use together with OpenCV.

We’re releasing this framework because we’re excited by the power of this approach for general image recognition, especially when it can run locally on low-power devices. It gives your phone the ability to see, and I can’t wait to see what applications that helps you build.

そして、すでにiOS版を試した人がQiitaに記事を書いてる。↓

Deep Belief SDK サンプルで嵌った点

で、オイラもサンプルコードのビルドを試してみたんだけど、Qiitaの記事みたいに例外で躓くこともなく、すんなりビルドできた。
オイラの環境はxcode5.1でiPhone5S。フレームワークのパスとプロビジョニングの設定だけ自分で直したら普通にビルドできたよ。
オイラが試したのは以下の3つのサンプル。
LearningExample
SavedModelExample
SimpleiOS

あ、ていうかRomoExampleってのがある!Romoでも遊べるのか。ハッカソンの成果を試す時が来たな。


DeepBeliefはこちらの資料でも少し紹介されていますね。

以下、SimpleiOSで物体認識を試してみたスクリーンショット

ゴジラカップG博ポスター

ミレゴジミレゴジ_2

純金ゴジラミッドタウンゴジラ_1

ミッドタウンゴジラ_2ミッドタウンゴジラ_3ミッドタウンゴジラ_4

7/26追記:デモビデオ見つけた↓




関連記事

OpenAR:OpenCVベースのマーカーARライブラリ

C#で使える遺伝的アルゴリズムライブラリ『GeneticSharp』

酒井ゆうじ造型工房『23cm シン・ゴジラ』 表面処理 その2

NeRF (Neural Radiance Fields):深層学習による新規視点合成

Raspberry Pi

7月にNHK BSプレミアムでゴジラ映画が放送されるぞ

白組による『シン・ゴジラ』CGメイキング映像が公開された!

Iterator

Kubric:機械学習用アノテーション付き動画生成パイプライン

UnityでLight Shaftを表現する

UnityでARKit2.0

酒井ゆうじ造型工房『23cm シン・ゴジラ』 表面処理 その1

酒井ゆうじ造型工房『23cm シン・ゴジラ』 パーツのバリ取り・脱脂

KelpNet:C#で使える可読性重視のディープラーニングライブラリ

Google App Engine上のWordPressでAmazonJSを利用する

アニメーション映画『GODZILLA』

書籍『ゼロから作るDeep Learning』で自分なりに学ぶ

Cartographer:オープンソースのSLAMライブラリ

Google Chromecast

ZBrushでゴジラ2001を作ってみる 身体のアタリを作る

pythonもかじってみようかと

MPC社によるゴジラ(2014)のVFXブレイクダウン

酒井ゆうじ造型工房『23cm シン・ゴジラ』 洗浄

映画『GODZILLA x KONG : THE NEW EMPIRE』の予告編が公開された!

YOLO (You Only Look Once):ディープラーニングによる一般物体検出手法

OpenCVのfindEssentialMat関数を使ったサンプルを読んでみる

夕刊ゴジラ

UnityプロジェクトをGitHubで管理する

オープンソースの人体モデリングツール『MakeHuman』のAPI開発プロジェクトがスタート

AfterEffectsプラグイン開発

酒井ゆうじ造形コレクションにゴジラ 2001が登場

Unityで学ぶC#

ROMOハッカソンに行ってきた

書籍『イラストで学ぶ ディープラーニング』

iPhone・iPod touchで動作する知育ロボット『ROMO』

ホビージャパン2016年10月号はシン・ゴジラ特集

Structure from Motion (多視点画像からの3次元形状復元)

MythTV:Linuxでテレビの視聴・録画ができるオープンソースプロジェクト

TorchStudio:PyTorchのための統合開発環境とエコシステム

『ゴジラと特撮美術の世界展』の公式図録

書籍『GODZILLA GRAPHIC COLLECTION ゴジラ造型写真集』が出るぞ

OpenGV:画像からカメラの3次元位置・姿勢を推定するライブラリ

コメント