6月にAppleのARKit 3が発表されて、それが利用できるのはiOS 13からということでワクワクしながら待っておりました。(持っているなけなしのiPhoneでは怖くてベータ版をインストールできなかった)
https://developer.apple.com/jp/augmented-reality/arkit/
Frame SemanticsのpersonSegmemntationWithDepthが実際どんな感じなのか試してみたいな。
今年の1月にUnity-ARKit-Pluginを使ってでちょっとARKit遊びをしてみたけれど、
ARKit 3以降はUnity-ARKit-Pluginではなく、AndroidのARCoreも含めて全てAR Foundationから利用する形になるらしい。
AR Foundation 3.0
AR Foundationを使用すれば、Unity上でマルチプラットフォームな方法で様々なARプラットフォームを操作できます。このパッケージはUnity開発者が使用できるインターフェイスを提供しますが、AR機能自体は実装していません。ターゲットとなるデバイスでAR Foundationを使用するには、そのプラットフォーム用の別のパッケージも必要となります。(例:iOSならARKit XR Plugin、AndroidならARCore XR Plugin)
AR Foundationは、以下のコンセプトに対応したデバイスを扱うためのMonoBehaviourとAPIのセットです。
- World tracking: 物理空間上でのデバイスの位置・向きのトラッキング
- Plane detection: 水平・垂直な平面の検出
- 点群 (特徴点)
- Reference points: デバイスが追跡する任意の位置・向き
- Light estimation: 物理空間の平均色温度・明るさの推定
- Environment probes: 物理環境の特定の領域を表すキューブマップの生成
- Face tracking: 人の顔の検出・トラッキング
- Image tracking: 2D画像の検出・トラッキング
- Object tracking: 3Dオブジェクトの検出
AR Foundation 1.0から移行する場合は、移行ガイドをご覧ください。
https://blogs.unity3d.com/2019/06/06/ar-foundation-support-for-arkit-3/
AR Foundationは、今までARプラットフォームごとに別々だったUnity Pluginの、Unity側のインターフェイスを統合したようなイメージですね↓
ということで、ARKitを使うにはこちらのプラグインも必要↓
ARKit XR Plugin
ARKit XR Pluginパッケージを使えば、UnityのマルチプラットフォームXR APIを通じてARKitを利用できます。
このパッケージは、以下のXRサブシステムを実装しています:
- Session
- Camera
- Depth
- Input
- Planes
- Raycast
- ReferencePoints
- Image Tracking
- Object Tracking
- Environment Probes
- Participants
このバージョンのARKit XR Pluginは以下の機能をサポートしています:
- Device Localization
- Horizontal Plane Detection
- Vertical Plane Detection
- Point Clouds
- Pass-through Camera View
- Light Estimation
- Reference Points
- Hit Testing
- Session Management
- Image Tracking
- Object Tracking
- Environment Probes
- Participants
フェイストラッキングのサポートは、別の”ARKit Face Tracking“パッケージで利用できます。
AppleのApp Storeでは、アプリ開発者がフェイストラッキングを使用する予定がない場合に、バイナリにフェイストラッキングに関わる特定のシンボルを含むアプリを拒否します。そのため、曖昧さを回避するためにフェイストラッキングのサポートを別のパッケージに分割しました。
AR FoundationのサンプルコードはGitHubにある↓
https://github.com/Unity-Technologies/arfoundation-samples
このサンプルが動作するUnityのバージョンは2019.2以降とのことなので、とりあえずインストール。
何か、Unityにほとんど触らないままバージョンを変え続けている気がする。Unityのバージョン管理はUnity Hubでラクチンだけど。
とりあえず1から始めるBasic Setupを日本語訳したと思われる記事を参考にちょっといじってみてから↓
https://qiita.com/fushikky/items/e43a1974d0f833121804
1からやるとPlayer Settingsがちょいちょい面倒なのね。
https://qiita.com/JunSuzukiJapan/items/e7c04072ac5e83fa6595
エディタは最近お気に入りのVSCodeを使おう。WindowsでもMacでも同じ使用感なので混乱しなくていい。
UnityのScriptを書く上で便利な拡張機能はこちらを参考にインストールした↓
https://qiita.com/kuronekoieko0305/items/bb2624a77c0e19d50b47
10年前、iPhone 3GSの時代に球面のレイトレーシングが手の平サイズのデバイス上で動いて感動したけど、その頃から考えるとすごい進歩だよな。
関連記事
マイケル・ベイの動画の感覚
ManimML:機械学習の概念を視覚的に説明するためのライブ...
fSpy:1枚の写真からカメラパラメーターを割り出すツール
ラクガキの立体化 胴体の追加
映画『ジュラシック・ワールド/炎の王国』のVFXブレイクダウ...
MB-Lab:Blenderの人体モデリングアドオン
Unity ARKitプラグインサンプルのドキュメントを読む
Autodesk CompositeとAutodesk Ma...
Python.NET:Pythonと.NETを連携させるパッ...
Oculus Goを購入!
Raspberry PiでIoTごっこ
ZBrushのキャンバスにリファレンス画像を配置する
Rerun:マルチモーダルデータの可視化アプリとSDK
このブログのデザインに飽きてきた
書籍『The Art of Mystical Beasts』...
2022年4月 振り返り
Webサイトのワイヤーフレームが作成できるオンラインツール
TensorFlowでCGを微分できる『TensorFlow...
Javaで作られたオープンソースの3DCGレンダラ『Sunf...
Oculus Quest 2を購入!
ZBrushの作業環境を見直す
無料で使える人体3DCG作成ツール
3分の動画でプログラミングを学習できるサイト『ドットインスト...
OpenMesh:オープンソースの3Dメッシュデータライブラ...
HD画質の無駄遣い その2
Mayaのポリゴン分割ツールの進化
ドットインストールのWordPress入門レッスン
『ローグ・ワン/スター・ウォーズ・ストーリー』のVFXブレイ...
映画『シン・仮面ライダー』 メイキング情報まとめ
WordPressプラグインによるサイトマップの自動生成
HTML5・WebGLベースのグラフィックスエンジン『Goo...
ZBrushで仮面ライダー3号を造る 仮面編 Clay Po...
ZBrushでリメッシュとディティールの転送
Photoshopで作る怪獣特撮チュートリアル
Multi-View Environment:複数画像から3...
3Dグラフィックスの入門書
BGSLibrary:OpenCVベースの背景差分ライブラリ
Swark:コードからアーキテクチャ図を作成できるVSCod...
2012 昨日のクローズアップ現代を見た
Maya LTのQuick Rigを試す
Maya API Reference
マルコフ連鎖モンテカルロ法
コメント