顔追跡による擬似3D表示『Dynamic Perspective』

Amazonの新しいスマホに搭載されてちょっと話題になったけど、カメラから画像認識技術を使ってユーザーの視線を計算すれば、2Dの普通のディスプレイでも疑似的に3D映像を表示することができる。Amazonはこの疑似表示方法をDynamic Perspectiveと呼んでいる。
これは、対象ユーザーが1人の場合に可能な方法で、ユーザーの目の移動に合わせてディスプレイに表示する映像を変化させることで、奥行きを感じさせるもの。スマホのように手に持つなど、目とディスプレイの位置関係が手振れなどで常に変動する環境が前提。両者の位置が静止した関係では立体感を表現できない。





個人的にこの考え方は非常に好き。この考え方というのは、表示を3Dにすることでよりリッチにしようって考えのこと。3Dテレビが盛り上がらなかったせいなのか、割と「3Dは無意味」って認識が根強いんだけど、コンテンツを作りづらいのが普及の一番の足かせだったと思う。日常生活で空間認識している状態に近い情報提示手段の方が、より直観的なUIだとオイラは考えている。
もちろん2Dの方が相応しい場合もあるとは思うけど、3Dだから可能になることもたくさんあるんじゃないだろうか。文書みたいなデスクトップのパラダイムで生まれた情報は確かに2Dの方が良いんだけどさ。

アマゾン初のスマートフォン「Fire Phone」レビュー(前編)–3D効果やデザインなど
アマゾン初のスマートフォン「Fire Phone」レビュー(後編)–アプリや機能、性能など

ちなみに、カメラ画像からの顔追跡には日本のオムロン社のエンジンが使われているらしい。同じ原理でiPadでもソフトウェア的に3D表示を実装することができる。
iPadで実装した例↓



顔や視線でコントロール コンピュータビジョンのセカイ – 今そこにあるミライ

関連記事

Physically Based Rendering

CycleGAN:ドメイン関係を学習した画像変換

ZBrushでアヴァン・ガメラを作ってみる 頭頂部と首周りを...

コンピュータビジョンの技術マップ

PGGAN:段階的に解像度を上げて学習を進めるGAN

ガメラ生誕50周年

ZBrushで作った3Dモデルを立体視で確認できるVRアプリ...

物理ベースレンダリングのためのマテリアル設定チートシート

Mayaでリアルな布の質感を作るチュートリアル

SSII 2014 デモンストレーションセッションのダイジェ...

HD画質の無駄遣い

PythonでMayaのShapeノードプラグインを作る

なんかすごいサイト

ハリウッド版「GAIKING」パイロット映像

オープンソースの顔認識フレームワーク『OpenBR』

Deep Fluids:流体シミュレーションをディープラーニ...

ZBrushでアヴァン・ガメラを作ってみる 頬の突起を作り始...

Autodesk CompositeとAutodesk Ma...

PCA (主成分分析)

第20回 文化庁メディア芸術祭『3DCG表現と特撮の時代』

2012のメイキングまとめ(途中)

オープンソースのロボットアプリケーションフレームワーク『RO...

openMVGをWindows10 Visual Studi...

Open Shading Language (OSL)

『ピクサー展』へ行ってきた

自前Shaderの件 解決しました

BlenderのRigifyでリギング

映画『シン・ウルトラマン』 メイキング記事まとめ

ZBrushCore

UnityでShaderの入力パラメータとして行列を渡す

ジュラシック・パークのメイキング

布のモデリング

PolyPaint

ZBrushでゴジラ2001を作ってみる 頭の概形作り

Rerun:マルチモーダルデータの可視化アプリとSDK

MeshroomでPhotogrammetry

YOLO (You Only Look Once):ディープ...

AndroidもopenGLも初心者さ (でもJavaは知っ...

Point Cloud Utils:Pythonで3D点群・...

書籍『3次元コンピュータビジョン計算ハンドブック』を購入

OpenMVSのサンプルを動かしてみる

OpenCV3.3.0でsfmモジュールのビルドに成功!

コメント