Apple多年来一直致力于AR眼镜 iOS 13只是最新的标志

在WWDC 2019主题演讲中,Apple花时间展示了它为ARKit 3带来的一些最新功能,ARKit 3是该公司的框架,允许开发人员为其应用添加增强现实功能。作为iOS 13的一部分而增加的将使Apple的AR努力达到一个新的水平,更接近用户期望的理想技术形式。

然而,就目前而言,Apple生态系统中的AR仍然局限于iPhone和iPad,这在用户体验方面并不理想。使用耳机的AR版本可以提供效果,而不需要人们在移动设备上保持和查看有限的窗口,这可能是该技术的完美形式,并且Apple继续更接近创建每一个对平台的改进。

iOS 13中的ARKit 3

主题演讲强调了迄今为止AR体验中缺少的一些元素,这些元素通过早期的ARKit版本实现。在ARKit 3下,进行了许多更改以使其更具身临其境,并使开发人员能够在其应用程序中提供更多功能。

ARKit 3的一个关键组件是人物遮挡,其中iOS设备检测到有人站在AR增强的场景中间。ARKit 3不是用数字对象平直地覆盖摄像机视图,而是可以检测到被人与用户之间的距离,如果它们理论上比数字对象更近,可以改变叠加以使对象看起来更像在人的背后。

该技术还可以实现绿屏风格效果,通过应用程序查看的主题可以看起来在完全数字化的环境中行走,而不需要色度键背景。

Apple还增加了动作捕捉功能,可以在应用程序中实时分析和解释主题的动作。将主体划分为简单的骨架,可以确定并监视关节和骨骼的变化,这些运动能够触发动画或者被记录以用于自定义的角色移动。

跟踪变化也会影响ARKit Face Tracking,后者已经利用现代iPhone和iPad Pro型号上的TrueDepth相机来分析用户的脸部,例如Memoji和Snapchat。在ARKit 3中,面部跟踪已经扩展,允许它同时处理多达三个面部。

另一个关键组件是用户在同一AR环境中相互协作的能力。通过让人们在单个会话中看到相同的项目和环境,这可以使多人游戏和协作工作在多人之间的AR中进行,从而实现社交元素到AR体验。

ARKit 3中还引入的其他变化是能够同时使用前后摄像头跟踪用户的脸部和世界,同时检测多达100个图像,自动估计物理图像大小,更强大的3D对象检测,并通过机器学习改进平面检测。

Apple正在进行的工作

除ARKit公告外,专利是苹果AR眼镜工作的第二个证据来源。

虽然Apple不打算在未来的产品和服务中使用其在美国专利商标局提交的创意,但这些文件至少表明Apple以前对研发工作感兴趣的领域。

AR耳机的一个关键元素是显示器,因为快速响应时间对于创建虚拟和真实场景组合的完美错觉至关重要。2016年12月和2017年1月的标题为“具有多种扫描模式的显示器”的专利申请描述了显示器的电路如何仅为每次刷新而不是整个显示器更新显示器的部分部分,以便最小化伪像出现在高位的可能性。分辨率和高刷新率屏幕。

仅更新屏幕的一部分还可以减少显示器执行每次刷新的工作量,从而缩短刷新周期并提高整体屏幕更新速率。更快的更新还可以帮助减少某些用户的晕动病,其中显示器的更新速度不足以匹配用户头部的物理移动。

正如2017年提交的“预测性,虚拟虚拟现实系统”一样,高速渲染世界的能力也可以帮助预防恶心和晕动病。由具有多摄像头设置的耳机组成,硬件将以低分辨率和高分辨率拍摄世界的照片,其中较高的部分向用户显示他们的眼睛在显示器上看,而较低的部分填充外围,

2016年“具有世界和用户传感器的显示系统”使用耳机外部和内部的摄像头来跟踪环境和用户的眼睛,表情和手势,从而能够创建和交互一种形式的增强现实图像。

眼动追踪在专利申请中也占有重要地位,其中包括2019年5月用于确定眼优势的一项,以及2018年的其他一些提示实际上尽可能靠近用户头部进行眼动追踪的方法。通过使跟踪设备更靠近面部并使用诸如“热镜”之类的物品来反射红外光,更少的重量定位在远离用户头部的位置,从而产生更舒适的用户体验。

在更实际的层面上,Apple还探索了AR眼镜如何完美贴合在2019年使用各种调节系统,包括电动收紧带和充气部分,以防止耳机一旦磨损就移动。热调节也被认为是一个重要元素,不仅可以冷却耳机内部的硬件,还可以冷却用户的脸部。

Apple还考虑过如何创建一种智能眼镜,而不是使用单独的显示器,只需将用户的iPhone放在眼前。作为基于智能手机的简单VR耳机外壳的更先进形式,Apple提出的“用于保持2017年便携式电子设备的头戴式显示设备从一侧滑动iPhone,包括一个摄像头和外部按钮,内置 - 手机中的耳机和遥控器。

为了进行互动,Apple花了一些时间研究如何在VR和AR系统中使用力感应手套。通过使用导电线和嵌入式传感器,手套和其他服装可以提供力感应能力,可以触发命令,读取手势,甚至计算与物理对象接触的手指数量。

在申请方面,Apple的专利申请表明AR可用于乘车服务,智能眼镜可让客户找到他们的乘车,反之亦然。对于导航,2019年的一项专利建议如何通过AR在真实世界的视图中显示兴趣点,还可以扩展其以建议房间中物品的位置,而不是显着的地理特征。

苹果创造某种智能眼镜或AR耳机的想法已经流传了一段时间,并可能导致未来几年硬件的发布。Loup Ventures的分析师Gene Munster在2018年建议苹果可以在2021年末发布“Apple Glasses” ,可能在发布的第一年销售多达1000万台,每台售价约为1300美元。

另一位苹果长期评论员郭明智最近提出,耳机可能会在2020年中期亮相,制造工作可能会在2019年底开始。

至于所谓的眼镜如何出现,Kuo建议他们可以采取行动更多作为iPhone的显示器执行大部分处理。WiGig联盟一个可以提供无线连接的60千兆赫无线网络系统,也已经为该设备以及8K分辨率的目镜以及所谓的代号“ T288 ” 倾斜。

2017年泄露的安全报告中 出现了耳机开发,在Apple的办公室中,测试原型设备的人员需要“急救以外的医疗”。特别是与眼睛疼痛相关的伤害,这表明它正在测试视觉相关的东西,可能是某种形式的耳机。

据报道,苹果公司还与技术供应商就2019年在CES上收购AR耳机组件进行了交谈,其中隐姓埋名的Apple员工正在访问波导硬件供应商。

此外,还收购了与AR和耳机生产密切相关的公司。2017年,Apple收购了眼动追踪公司SensoMotoric Instruments2018年8月,它收购了Akonia Holographics,这是一家专注于AR耳机专用镜头开发的创业公司。

郑重声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时间联系我们修改或删除,多谢。