广告

元宇宙热潮下,Meta自研7nm芯片,英伟达研发VR超薄全息眼镜

时间:2022-05-09 09:52:03 作者:综合报道 阅读:
Meta Reality Labs的研究人员已经制造了一款VR头戴设备原型机,该原型机可以支持Codec Avatars项目的渲染,搭载了专门用于AI处理的定制加速器芯片。此外,英伟达与斯坦福大学展示了一种用于VR的超薄全息眼镜构思......
广告

在Facebook更名为Meta前,Meta公司就一直致力于Codec Avatars项目,旨在使VR实现“如照片般逼真”的虚拟化身。这一系统结合AI处理和设备上的眼动追踪、嘴巴追踪等传感器,将使用者的脸以最接近真实的方式投射进虚拟世界。

近日有外媒ROAD TOVR报道称,Meta Reality Labs的研究人员已经制造了一款VR头戴设备原型机,该原型机可以支持Codec Avatars项目的渲染,搭载了专门用于AI处理的定制加速器芯片。

Meta上个月发表在IEEE CICC会议上的一篇论文中透露,它正在设计一个采用7nm工艺的定制芯片用于作为Codec Avatars的加速器。

该芯片的占位面积仅为 1.6mm²,该小组在芯片设计过程中,设计人员考虑了生成Codec Avatars 模型所需要的数据。

“测试芯片采用7nm制程,具有神经网络加速器,由1024乘法累加阵列、2MB片上SRAM和32位RISC-V CPU组成。”研究人员说。

反过来,他们还重建了 Codec Avatars AI 模型的一部分,以配合芯片的特定架构。

“我们通过重新构建基于卷积神经网络的眼睛注视模型并针对硬件进行定制,使得模型更加适合芯片。这降低了片外内存访问的能耗和延迟。” Reality Labs研究人员写道。“通过在电路级有效地加速卷积运算,所展示的原型芯片实现了每秒 30 帧的性能,并且功耗低且外形小巧。”

通过加速 Codec Avatars 工作负载的密集部分,该芯片不仅加快了进程,而且还降低了功率及发热。由于芯片的定制设计,它能够比通用 CPU 更有效地做到这一点,然后为 Codec Avatars 的眼动追踪组件的重新架构软件设计提供信息。

虽然定制芯片处理部分 Codec Avatars 编码过程,但 XR2 管理解码过程并渲染化身的实际视觉效果。

目前我们不知道虚拟化身的视觉渲染效果如何。在非一体机上运行时,该模型将用户建模扫描的非常详细,这可能过于复杂,不能在Quest2等一体机上得到完整的呈现。目前还不知道Codec Avatars强大的“逼真”画面在这客观条件的限制下最终呈现的效果会如何。

英伟达正与斯坦福大学合作,研发VR超薄全息眼镜

根据IDC表示,2021年是AR/VR头显市场继2016年后再度爆发的一年,相较于5年前,从硬件设备、技术水平、内容生态、创作环境上来说,相较五年前已经有了大幅度的提升,行业生态更加健康,产业基础更为牢固。

根据IDC《全球AR/VR头显市场季度跟踪报告,2021年第四季度》,预计2022年,全球VR头显出货1,573万台,同比增长43.6%。再加之受到元宇宙概念的推动,使得VR厂商接连推出新品,迭代节奏明显加快。

近日,在一份名为《Ultra-thin (2.5 mm) glasses-form factor VR display supporting 3D holographic images》的论文中,英伟达与斯坦福大学展示了一种用于VR的超薄全息眼镜构思。

据悉,该眼镜可将3D全息图像所需的技术封装到厚度仅有2.5mm的超薄VR显示器原型。这个名为Holographic Glasses的全息眼镜由一个光瞳复制波导、一个空间光调制器和一个几何相位透镜组成,可以以轻薄的形状参数产生全息图像。

此外,这款全息眼镜提供22.8 °的对角视场,2.3毫米静态和8毫米动态眼盒,并支持3D 焦点提示,体积更小,而且非常轻巧。

据外媒称,该全息眼镜目前仍处于原型研究阶段,图像质量、光瞳直径与控制以及系统集成方面依然存在提升空间,所以接下来研究人员将继续致力于优化迭代。

VR头显引进游戏领域

据悉,游戏开发商Render Cube透露其动作冒险游戏《Medieval Dynasty》的VR版本正在制作中,游戏将登陆Meta Quest 2、PCVR和PSVR 2平台,预定的发售时间为2023年第一季度。

独立团队Better Than Life近日宣布其皮划艇模拟游戏《Kayak VR:Mirage》将于6月29日登陆Steam平台,支持Valve Index、HTC Vive、Oculus Rift和Windows MR头显,发布时将包含一些地图、竞赛模式和自由漫游选项。

位于美国佛罗里达州,集购物、餐饮和娱乐于一体的综合型设施的迪士尼之泉(Disney Springs)在5月2日~7月21日期间,为来访游客提供免费的VR游戏《星球大战 银河边缘的故事》(Star Wars: Tales from the Galaxy's Edge)体验。《星球大战 银河边缘的故事》是由美国工作室ILMxLAB开发的动作冒险游戏,于2020年11月发售。

IDC中国终端系统研究部分析师赵思泉认为,VR一体机产品在2022年的出货仍将依赖游戏内容的吸引,厂商需重点关注内容生态建设,提升消费者购买意愿以及购买后持续在应用商店消费的能动性。

VR头显引进汽车领域

近日,微软正式宣布在HoloLens 2推出“移动平台”功能,该功能由微软与大众汽车合作开发,旨在让这个VR头显在汽车等地方工作。

大众汽车一直尝试引入头显设备作为车辆的平视显示器,HoloLens 2一直在迭代优化的移动平台模式克服了将混合现实设备应用到车辆船舶等移动平台的限制,并创造了以新方式使用所述技术的潜力。

车辆引入AR眼镜难点在于传感器数据的冲突。此前微软一篇博文透露,AR眼镜使用相机传感器以及惯性测量单元(IMU)来实现运动追踪。但是在汽车里,这两个传感器的读数可能会发生冲突,因为头显看到的是静态环境,而IMU感知到的则是运动场景。

此外,据ETtoday报道,Meta还宣布在中国台湾成立全亚洲第一座“元宇宙 XR Hub Taiwan”,展开 AR 与 VR 计划,Meta指出,元宇宙是未来社群科技的核心,Meta将透过 3D 沉浸式互动体验增强社群。由于台湾的硬件、网络等公共基础架构普及,还有优秀开发者,Meta选定台湾为发展元宇宙重要据点。

这次元宇宙 XR Hub Taiwan 为 Meta 与资策会一同设立的社群空间。未来将结合台湾艺术家与 AR 创作者,透过AR功能,呈现台湾文化艺术、经济商业、社会公益等三大领域的社群互动。

本文参考自新浪VR、环球网、cnBeta、VR陀螺、Disney Springs、IDC等

责编:Amy.wu
  • 拆解真我Buds Air2:内部结构简单,但功耗低、主动降噪、 从拆解方面来看充电盒的拆解比较简单,但器件方面还是值得推敲的。例如:Buds Air2内集成2颗降噪麦克风,SOC采用IROHA络达 的AB1562F蓝牙音频SOC,支持蓝牙5.2。并具有超低功耗,稳定蓝牙连接及主动降噪功能,并且提供了新一代三麦克风降噪技术,搭配降噪算法,能明显的降低风噪,提高通话质量。
  • 以RF无线充电技术实现助听器设计 总部位于美国加州的Energous宣布,其WattUp无线充电技术将为EarTechnic即将推出的助听设备Tie-X进行无线充电...
  • 拆解Apple AirTag:内部精密,U1 UWB收发器占最大空间 有人猜到这次要拆解什么产品吗?当然是Apple AirTags追踪设备。既然之前都拆解了Tile Mate,当然也只有同样对AirTag进行检视才算公平,对吧?
  • 华为也赶Tag热潮?拆解对比:三星SmartTag+ vs苹果AirTag 根据外媒最新消息指出,根据 MySmartPrice 的一份报告显示,在蓝牙 SIG 认证网站上发现了华为即将推出的智能追踪器,查看认证列表,该华为标签智能追踪器的型号为 KRI-CE010......
  • 移动应用开发的未来是什么? 在智能手机如此普及的今天,人们时常忘记移动应用是“新事物”。目前还没有任何移动应用开发放缓的迹象。人工智能(AI)、VR、AR和区块链等新兴技术正在不断影响移动应用开发的进程,手机和可穿戴设备上的应用已逐渐渗透到人们的生活。那么,移动应用开发的未来是什么呢?
  • 不做“一代拳王”,汇顶科技坚持高研发投入即将迎来曙光 长期以来,科技公司的健康研发投入占比大概是18% ,而对于芯片设计行业来说,这个数字可能要达到 20%。2021年全球半导体研发支出首次超过800亿美元,整体达到815亿美元,较2020年增长12%。仅英特尔一家公司的研发支出,就占前十大半导体公司研发支出总和的26.83%,从目前中国上市fabless厂商的研发投入营收占比来看,大多难以达到欧美公司的水平,但汇顶科技无疑是最接近的之一……
  • 新款iPad Pro 2021成最受欢迎的 由于采用性能相对强大的M1处理器和mini-LED屏幕以及更多的创新,新款iPad Pro 2021已经成为消费者心目中最受欢迎。然而,iPad 2却已经在全球范围内被列入“复古和过时”的名单中。
  • 三星折叠屏手机Galaxy Z Fold 3 目前来看,折叠屏新机作为一种新的生产力工具,逐渐成为高端/平板的一种趋势,有报料称三星的Galaxy Z Fold 3发布时间或为7月,并且会引入新手势操控。
  • 基于架构创新,后摩智能点亮业内首款 5月23日,后摩智能宣布,其自主研发的业内首款存算一体大算力AI芯片成功点亮,并成功跑通智能驾驶算法模型。
  • Nexperia和KYOCERA AVX Componen 将成熟的GaN技术与创新型封装专业知识相结合
  • 想全面了解第三代半导体,听这节课就够了!(完全免费) 随着新能源汽车、5G通信、轨道交通、光伏储能等产业的高速发展,以碳化硅和氮化镓为代表的第三代半导体作为关键核心材料,成为市场聚焦的新赛道,不仅半导体企业持续发力完善第三代半导体产业布局,华为、比亚迪、
  • 20220523Emma有单,您有货吗? 芯片供应商骗局近期频频爆雷,假货、跑路、维权无门,两眼一抹黑怎么办?【超人投票】告诉你答案,火眼识别靠谱供应商。【超人投票】是芯片超人在2017年推出的,帮助市场上的朋友找到靠谱供应商的决策工具。5年
  • 放大器电源知识点汇总!课代表带你划重点! 课代表笔记来啦——  放大器电源的那些事儿 Part.1  ——学霸笔记妙,学习更高效😏正值《放大器电源的那些事儿》第二部分上线ADI为大家带来课代表笔记助您更快掌握放大器电源知识!点击可查看 每部分
  • 具较高电流SIO通道的四通道IO-Link主控器,认识一下? IO-Link 是一项针对工业应用中智能传感器和执行器点对点三线式接口的通信标准。IO-Link 把这些器件的传统接口能力从简单的 NC/NO 开关接口 (标准 IO 或 SIO 模式) 扩展到双向智
  • 高速数字信号的匹配问题 在高速数字信号中,PCB布线的目的,就是保证接收端能够正确接收到发射端的信号。正确体现在两个方面:(1)如果设计到时钟的话,需要保证时序的正确性;(2)波形幅度需要符合要求,因为数字信号一般对大于VI
  • JDI准备量产世界上第一款无FMM蒸镀+光刻OLED技术,还可用于G8代以上产线 知识酷 👆显示技术 | 显示资讯 | 知识管理第1268篇推文近日,JDI宣布开发 eLEAP技术,这是世界上第一个使用无掩模蒸镀和光刻技术准备大规模生产的OLED技术。eLEAP 是一种显示技术的突
  • TMT要闻预告(5月23日-29日)|华为、OPPO、小米等发新品;阿里巴巴、联想、网易等发布业绩和财务信息          5月23日Zoom、猎豹移动、趣头条、声网发布业绩和财务信息。OPPO发布OPPO Reno8系列新品。华为举办MateBook系列新品发布会。索尼Xperia 1 IV国行版发布。
  • 华为鸿蒙系统领路人王成录被曝离职! 芯片验证春季班开班!1750元补助即将收尾!就业畅销课《芯片验证从入门到精通》5 月 23 日消息,消息称华为鸿蒙领路人、华为终端 BG 软件部总裁王成录博士已经离开华为,目前其个人微博的官方认证也已
  • 20220523买芯片找老王 芯片供应商骗局近期频频爆雷,假货、跑路、维权无门,两眼一抹黑怎么办?【超人投票】告诉你答案,火眼识别靠谱供应商。【超人投票】是芯片超人在2017年推出的,帮助市场上的朋友找到靠谱供应商的决策工具。5年
  • 邮电大学的岁月往事 来源:鲜枣课堂新中国成立后,百废待兴。当时,各个行业领域都急缺专业技术人才。然而,国内专业院校数量稀少,且千疮百孔、体系混乱,根本无法满足用人需求。1953年,国家高教部借鉴苏联经验,在全国范围内实行
广告
热门推荐
广告
广告
广告
EE直播间
在线研讨会
广告
广告
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了