顔追跡による擬似3D表示『Dynamic Perspective』

Amazonの新しいスマホに搭載されてちょっと話題になったけど、カメラから画像認識技術を使ってユーザーの視線を計算すれば、2Dの普通のディスプレイでも疑似的に3D映像を表示することができる。Amazonはこの疑似表示方法をDynamic Perspectiveと呼んでいる。
これは、対象ユーザーが1人の場合に可能な方法で、ユーザーの目の移動に合わせてディスプレイに表示する映像を変化させることで、奥行きを感じさせるもの。スマホのように手に持つなど、目とディスプレイの位置関係が手振れなどで常に変動する環境が前提。両者の位置が静止した関係では立体感を表現できない。



https://www.youtube.com/watch?v=RvOIpN7ZiVg

個人的にこの考え方は非常に好き。この考え方というのは、表示を3Dにすることでよりリッチにしようって考えのこと。3Dテレビが盛り上がらなかったせいなのか、割と「3Dは無意味」って認識が根強いんだけど、コンテンツを作りづらいのが普及の一番の足かせだったと思う。日常生活で空間認識している状態に近い情報提示手段の方が、より直観的なUIだとオイラは考えている。
もちろん2Dの方が相応しい場合もあるとは思うけど、3Dだから可能になることもたくさんあるんじゃないだろうか。文書みたいなデスクトップのパラダイムで生まれた情報は確かに2Dの方が良いんだけどさ。

アマゾン初のスマートフォン「Fire Phone」レビュー(前編)–3D効果やデザインなど
アマゾン初のスマートフォン「Fire Phone」レビュー(後編)–アプリや機能、性能など

ちなみに、カメラ画像からの顔追跡には日本のオムロン社のエンジンが使われているらしい。同じ原理でiPadでもソフトウェア的に3D表示を実装することができる。
iPadで実装した例↓



顔や視線でコントロール コンピュータビジョンのセカイ – 今そこにあるミライ

関連記事

「ベンジャミン·バトン数奇な人生」でどうやってCGの顔を作っ...

ZBrushでアヴァン・ガメラを作ってみる 下半身のバランス...

BlenderのGeometry Nodeで遊ぶ

Maya API Reference

AR (Augmented Reality)とDR (Dim...

Googleが画像解析旅行ガイドアプリのJetpac社を買収

Pix2Pix:CGANによる画像変換

MPC社によるゴジラ(2014)のVFXブレイクダウン

Multi-View Environment:複数画像から3...

Mitsuba 3:オープンソースの研究向けレンダラ

実写と実写の合成時の色の馴染ませテクニック

UnityでARKit2.0

ニューラルネットワークと深層学習

『ローグ・ワン/スター・ウォーズ・ストーリー』のVFXブレイ...

viser:Pythonで使える3D可視化ライブラリ

日立のフルパララックス立体ディスプレイ

ガメラ生誕50周年

フルCGのウルトラマン!?

色んな三面図があるサイト

『シン・ゴジラ』のコンセプトアニメーションのメイキング動画が...

なんかすごいサイト

ManuelBastioniLAB:人体モデリングできるBl...

Photo Bash:複数の写真を組み合わせて1枚のイラスト...

映画『シン・ウルトラマン』 メイキング記事まとめ

ZBrushでアヴァン・ガメラを作ってみる 首回りの修正・脚...

TVML (TV program Making langua...

Adobe Photoshop CS5の新機能

BlenderのPython環境にPyTorchをインストー...

adskShaderSDK

ZBrushで人型クリーチャー

ZBrushのZScript入門

ZBrushでゴジラ2001を作ってみる 身体のシルエット出...

Faceshiftで表情をキャプチャしてBlender上でM...

オープンソースの顔認識フレームワーク『OpenBR』

ZBrush 2018での作業環境を整える

Mayaのポリゴン分割ツールの進化

Maya LTでFBIK(Full Body IK)

ZBrushでアヴァン・ガメラを作ってみる 甲羅の修正・脚の...

OpenCV 3.1から追加されたSfMモジュール

PCA (主成分分析)

第25回コンピュータビジョン勉強会@関東に行って来た

ポリゴン用各種イテレータと関数セット

コメント