历史上的今天

今天是:2024年08月30日(星期五)

正在发生

2019年08月30日 | 浸入“现实”,苹果眼睛跟踪系统揭秘

发布者:等放假的Lwj 来源: 爱集微关键字:苹果 手机看文章 扫描二维码
随时随地手机看文章

虚拟现实(VR)允许用户体验或与沉浸式人工环境进行交互,使得用户有身处现实中的感觉。随着5G的到来,虚拟现实将发挥重要作用,但是由于当前一些VR设备沉浸式环境较差、用户体验不好的影响,导致虽然传统VR设备的需求有所锐减。

为了解决这一问题,苹果公司之前就申请了一项名为“眼睛跟踪系统”的发明专利(申请号为:201780064399.1),申请人为苹果公司。它主要用于检测头戴式显示器(HMD)中用户眼睛的位置和运动的眼睛跟踪系统。

图1

图2

上面两图展示出了用于VR/AR HMD的眼睛跟踪系统。VR/AR HMD 100主要包括安装在外壳中的显示器110和两个目镜透镜120。目镜120在接近其光学无限远处形成所显示的内容的虚拟图像,用户可以通过目镜120看到显示器110所显示的内容。在眼睛跟踪相机140的操作中,我们使用了两个不同的相机光路。如图1所示,在第一相机光路中,相机140通过目镜120捕获光;而图2所示的光路中,相机140可以直接捕获用户眼睛的直接视图。但它们各自有优缺点,比如图1可以通过目镜视图允许眼睛可以看到更居中的视图,但是必须处理由目镜引入的眼睛图像中的失真。而图2的直接视图不穿过目镜,但是可从倾斜位置朝眼睛看,由于失真、不足的景深和遮蔽,这可引起极端注视角度处的眼睛特征的减少的检测精度。

该系统主要操作流程如下所示。

图3

首先HMD的光源发射近红外(NIR)光以照射用户的眼睛,然后NIR光的一部分从用户的眼睛反射到位于HMD的光学透镜(目镜)面向眼睛的表面处或附近的热镜。接着,热镜会反射一部分NIR光,同时允许可见光经过。最后再通过多个近红外相机捕获由热镜反射的用户的眼睛的图像。

图4

图4是VR/AR系统1900的部件框图,它主要包括头戴显示器(HMD) 2000和外部设备2100。

其中HMD中的投影仪2020用来显示左右图像的帧,而此帧可以由用户通过左右两个目镜观看的屏幕或左右显示器上来获得。同时,为了在3D虚拟视图中创建3D效果,两个图像中不同深度或距离的对象可作为距离的三角测量的函数,来进行左右偏移,其中较近的对象比更远的对象偏移得更多。该系统中的控制器2030包括实现多种指令集架构(ISA)(诸如x86、PowerPC、SPARC、RISC或MIPS ISA、或任何其他合适的ISA)中的任何指令集架构的通用处理器或嵌入式处理器。主要用于实现VR/AR系统1900的功能,并且生成由投影仪2020显示的帧(每个帧包括左右两张图像)。该系统也包括用来存储系统操作的软件和数据的存储器。另外头戴式显示器(HMD)2000主要通过有线/无线接口与外部设备2100(如:台式计算机、笔记本、平板、智能电话、游戏系统等等)进行数据交互。

该系统可以利用VR的模拟环境为多种应用提供交互式用户体验,比如将虚拟内容添加到观看者的环境的实时视图的应用、与虚拟训练环境进行交互的应用、与因特网交互的应用等等,极大的方便了人们生活,同时小编也希望在不久的将来VR设备可以更加智能化,更加人性化,并且能尽快的应用到更多的场景中来。


关键字:苹果 引用地址:浸入“现实”,苹果眼睛跟踪系统揭秘

上一篇:新一批国家AI开放创新平台公布,华为等十家入选
下一篇:苹果供应链数据满满的是对中国的依赖

推荐阅读

据报道,近日中国电子学会近期发布《中国机器人产业发展报告(2018)》中表示,中国工业机器人连续6年成为世界第一大应用市场,在、伺服控制、伺服等关键核心零部件领域取得了很大突破。目前,国产控制器等核心零部件在国产工业机器人中的使用也进一步增加,智能控制和应用系统的自主研发水平持续进步,制造工艺的自主设计能力不断提升。 国产品牌频获...
上一篇主要是介绍了下芯片手册 I2C 部分,都应该看些什么,以及上拉电阻取值和传输速率模式选择。这一篇该来点程序了,首先以 AT24C02 (EEPROM)为基础介绍一下I2C设备驱动编程,然后以 MT9P031 为基础介绍 LINUX 下内核配置。 最后是 MPU6050 为基础的单片机下 I2C 通信程序。一、I2C设备驱动编程该部分我会以嵌入式Linux软硬件开发详解第...
8月28日,商务部会同科技部调整发布了《中国禁止出口限制出口技术目录》。此次调整有何意义?带来哪些管理新规?对科创企业影响几何?记者就此采访了长期跟踪研究技术贸易法规的中国对外经济贸易大学教授崔凡。对技术出口实行负面清单管理是国际惯例此次并非我国首次调整《中国禁止出口限制出口技术目录》。商务部服贸司负责人就此答记者问时说,上一次目...
示波器有多种方式来表示波形出现概率的大小,在正常显示模式下,示波器用灰度大小来表示波形出现的概率。波形出现的概率越大,波形的颜色就越亮,波形出现的概率越小,波形的颜色就越暗,如图1所示。图1 用灰度来表示波形出现的概率除此之外,为了方便我们更清楚地了解波形出现的概率大小,ZDS2022示波器还配备了色温显示的功能,今天我们就来分享一下ZDS...

史海拾趣

问答坊 | AI 解惑

有没有人有STM32 DXP的PCB库呢?

有没有人有STM32 DXP的PCB库呢?…

查看全部问答∨

基于OMAP5910芯片Windows CE系统的WCDMA移动终端设计.pdf

基于OMAP5910芯片Windows CE系统的WCDMA移动终端设计.pdf…

查看全部问答∨

C# 调用Imange接口

一哪位高手帮我解决下掉用后内存释放问题哦…

查看全部问答∨

Tornado启动失败

在电驴上下载了Tornado2.2 for 奔腾,安装之后启动Tornado总是显示“Lecensing Failed...”,但是我已经把lecense.dat放到c:\\flexlm下,而且设置了环境变量。请问怎么解决这个问题?…

查看全部问答∨

安装SQL CE2.0之后只有帮助的文档,是怎么回事?

我几天安装完SQL CE2.0以后,准备在SQL CE 2.0里建立数据库,于是在开始-程序准备打开SQL CE 2.0 结果发现只有SQL CE2.0的帮助文档。是怎么回事? 是不时还要装SQL SEVER阿 我的SQL CE2.0时从微软下载的,40多M,IIS也装了…

查看全部问答∨

基于LabVIEW图形界面的TI LM3S8962的开发续--ADC

以下图片为本次例程的程序框图,附件为工程文件和VI。 本例程主要是从开发板ADC0取得模拟电压值,然后简单的显示在开发板的OLED上。 注:开发板的模拟参考电压为3.3V,不是5V。 …

查看全部问答∨

iTouch FPGA

在大家的一起努力下,“<50元的FPGA核心板,会否有朋友顶啊?”这个帖子得到热烈的回应,板子也大家的期盼中完工,为了方便大家的交流和资料的跟进,特意新开这个帖子,有兴趣的朋友可以在这个帖子进行跟新。   首先再介绍一下这个板子: ...…

查看全部问答∨

针对the Xilinx Virtex™ LX130 的电源参考设计

Xilinx® Virtex-6 FPGA参考设计是一款采用TPS40190控制器及TI NextFETs™的Virtex 6 LX130设计,旨在提供最高效率和最佳性能。…

查看全部问答∨

我看运放的压摆率

从接触运放开始,就很关注运放的SR和G、GBP(即GBW),这三个参数一般是我用运放关注的,但是一直不是很明白压摆率和增益带宽积还有就是放大倍数的关系,今天我认真的查资料分析了一下,结果如下:     1、压摆率(slew rate) ...…

查看全部问答∨

2014电子专业毕业生求职-硬件工程师类

卢杰    应届毕业生  |  男  |  22岁(1991年6月23日)    居住地:        杭州        户 口:   &nbs ...…

查看全部问答∨
小广播
最新手机便携文章

 
EEWorld订阅号

 
EEWorld服务号

 
汽车开发圈

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved