广告

苹果VR头显或利用AI感知用户动作姿势

时间:2021-07-13 作者:综合报道 阅读:
​​​​​​​VR最大的难处之一是怎样准确、灵敏感知用户做出的动作或者姿势,从而触发系统响应。其他厂商的VR头显很早就推出来了,产品和性能或者性价比参差不齐,而苹果的VR头显之所以一直没有正式推出,就是在这方面一直在探索最优最好的体验。现在有最新专利显示,苹果VR头显或许会利用AI神经网络来感知用户的动作或者姿势,从而提高这方面的体验。
广告

VR最大的难处之一是怎样准确、灵敏感知用户做出的动作或者姿势,从而触发系统响应。其他厂商的VR头显很早就推出来了,产品和性能或者性价比参差不齐,而苹果的VR头显之所以一直没有正式推出,就是在这方面一直在探索最优最好的体验。现在有最新专利显示,苹果VR头显或许会利用AI神经网络来感知用户的动作或者姿势,从而提高这方面的体验。

苹果VR或AR头显可以根据监测用户的身体动作来移动用户的虚拟头像,而其电池寿命可以通过一些巧妙的数据传输技术来延长。在美国专利和商标局周二授予的一对专利中,苹果公司认为它可以改进其头显所能提供的东西,涉及到它如何与用户互动,以及它如何与主机设备进行通信。

第一项专利名称为"生成身体姿势信息",涵盖了系统跟踪用户运动的能力,然后使用这些数据来执行其他相关动作。苹果估计,一些沉浸式计算机生成的现实体验需要了解用户的身体姿势。在一些体验中,VR或AR应用可能会根据用户的姿势或动作,对其呈现的内容做出改变,比如游戏中的警卫会对用户的姿势做出不同的反应。

更明确地说,苹果公司建议,了解身体的姿势可以用来控制用户的化身。这在流行的在线社交体验VR聊天等情况下可能很有用,它可以利用其他硬件的运动来改变用户化身的动作。根据该专利,苹果公司建议可以使用各种相机和神经网络来学习姿势,多个神经网络一起工作,为单个身体关节建模。每个神经网络都单独工作,但其结果被反馈到一起以创建整个身体模型。

训练将以多种方式进行,不仅要教授对摄像机数据的理解,还要训练网络如何相互作用,这包括多个神经网络系统的各自拓扑结构。就网络能收集多少关于一个人的姿势的信息而言,有说法称监测的关节涵盖颈部、肩关节、肘关节、腕关节、骨盆关节、膝关节、踝关节和指关节。

第二项与VR有关的专利名为"自适应无线传输方案",瞄准了处理头显和主机之间的通信。目前,像Oculus Quest这样的一体式系统,它们会增加设置的重量,虽然系留式设置可以减轻重量,但电缆本身可能是一个问题。解决这个问题的办法是采用无线通信系统,以减轻重量并消除电缆。

然而,即使是无线系统也会引起问题。例如,传输数据需要消耗电力,而且无线系统的可用带宽通常比电缆系统低。还有固有的干扰问题和其他干扰性问题。在这项专利中,苹果建议可以使用无线系统,但为了减少一次性传输的数据量,该系统必须发送更少的视频数据。苹果计划通过使用左眼数据和右眼数据的交错帧传输,希望将使用的带宽减半。

责编:EditorDan

 

本文为EET电子工程专辑 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
  • TOPS:深度学习谎言背后的真相 AI公司通常都以更高的TOPS(每秒一万亿次操作)作为评判算力的标准。但芯片制造商在推销他们的TOPS指标时,都不会真正提供准确的引导。本文将论述业界因错误标记性能指标而导致的问题,并阐述用户该如何独立评估真实环境中的TOPS。
  • 国产MCU发展的五大驱动力 对国产MCU厂商来说,“国产替代”和“芯片短缺”反而成为推动其MCU产品线打入大中型OEM厂商供应链,甚至汽车供应链的驱动力。据《电子工程专辑》分析师团队调查了解,凡是能够保证代工厂和封测合作伙伴正常供应的国产MCU厂商,都享受到了销售和利润同时增长的甜头。
  • 未来MCU设计的六个方向 随着AI和IoT的发展与融合,微处理器(MCU)的设计也更加复杂,逐渐从传统单一功能的微控制器转向集成更多功能特性、计算性能更强的系统级芯片(SoC)。ASPENCORE《电子工程专辑》分析师团队识别出如下六个MCU设计的发展方向。
  • 现在到处都是传感器,我该怎么办? 现在,对于运输、机器人、家庭自动化、智能城市、工厂和仓库管理中许多可能的应用来说,通过视觉、雷达或激光雷达传感来进行物体识别和碰撞警告,通过超声波传感器实现短距离的接近侦测,通过IMU进行运动和姿势检测,基于声学的危险声音检测已经很普遍了。说实话,这个清单是无穷无尽的。我们拥有建立一个由智能传感驱动的未来主义的、几乎是科幻小说的世界所需要的所有原材料。但是怎么做呢?
  • 清微智能王博谈智能安防硬核技术之智能感知、图像/视 《电子工程专辑》8月刊封面专题的主题是智能安防三大硬核技术,我们从智能感知、图像/视频处理,以及AI计算这三个方面分别采访了多名业界技术专家。本文是清微智能CEO王博就智能感知、图像/视频处理和边缘AI计算方面的问答访谈。
  • 思特威欧阳坚谈智能安防硬核技术之智能感知 《电子工程专辑》8月刊封面专题的主题是智能安防三大硬核技术,我们从智能感知、图像/视频处理,以及AI计算这三个方面分别采访了多名业界技术专家。本文是思特威副总经理欧阳坚就智能安防硬核技术的智能感知进行的问答访谈。
  • 新款iPad Pro 2021成最受欢迎的 由于采用性能相对强大的M1处理器和mini-LED屏幕以及更多的创新,新款iPad Pro 2021已经成为消费者心目中最受欢迎。然而,iPad 2却已经在全球范围内被列入“复古和过时”的名单中。
  • 三星折叠屏手机Galaxy Z Fold 3 目前来看,折叠屏新机作为一种新的生产力工具,逐渐成为高端/平板的一种趋势,有报料称三星的Galaxy Z Fold 3发布时间或为7月,并且会引入新手势操控。

  • EMC对策产品: TDK推出用于移动设备 TDK株式会社(TSE:6762)推出用于移动设备的TCM0403M系列小型薄膜共模滤波器
  • 比科奇ORANIC板卡获行业大奖,5G小基 比科奇(Picocom)日前宣布:该公司荣获全球小基站论坛(SCF)一项大奖,其全新的ORANIC板卡赢得了全球小基站论坛(SCF)2021年度“小基站芯片及组件杰出创新金奖”。
广告
热门推荐
广告
广告
广告
EE直播间
在线研讨会
广告
广告
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了