Helm.ai推出首款面向自动驾驶的多传感器生成式AI模型WorldGen-1

MEMS 2024-08-14 00:01

据麦姆斯咨询报道,面向高端高级驾驶辅助系统(ADAS)、Level 4自动驾驶和机器人技术的领先人工智能(AI)软件开发商Helm.ai,近日宣布推出首款用于模拟整个自动驾驶车辆堆栈的多传感器生成式AI基础模型WorldGen-1。该模型可同时从多种模式和视角融合高度逼真的传感器和感知数据,将传感器数据从一种模式外推到另一种模式,并预测自动驾驶车辆和驾驶环境中其它主体的行为。这些基于AI的模拟能力,简化了自动驾驶系统的开发和验证过程。

WorldGen-1利用生成式DNN架构和深度教学(Deep Teaching,一种高效的无监督训练技术)方面的创新,基于数千小时的各种驾驶数据进行训练,涵盖了每一层自动驾驶堆栈,包括视觉、感知、激光雷达(LiDAR)以及里程测量等。

WorldGen-1可同时为环视摄像头、感知层语义分割、前视激光雷达、鸟瞰激光雷达和物理坐标中的自动驾驶车辆路径生成高度逼真的传感器数据。通过在整个自动驾驶汽车堆栈中一致地生成传感器、感知和路径数据,WorldGen-1能够从自动驾驶汽车的角度准确复制潜在的真实环境。这种全面的传感器模拟能力,能够生成高保真的多传感器标记数据,以解决和验证无数具有挑战性的极端情况。

此外,WorldGen-1还能从真实摄像头数据推断多种其他模式,包括语义分割、前视激光雷达、鸟瞰激光雷达和自动驾驶车辆的路径。这项功能可将现有纯摄像头数据集扩展为合成多传感器数据集,从而丰富纯摄像头数据集,并降低数据收集成本。

除了传感器模拟和推断,WorldGen-1还能根据观察到的输入序列,预测行人、车辆和自动驾驶车辆相对周围环境的行为,生成长达数分钟的逼真时间序列。这使AI能够生成广泛的潜在场景,包括罕见的极端情况。WorldGen-1可以根据观察到的输入数据,模拟多种潜在结果,展示了其先进的多主体规划和预测能力。WorldGen-1对驾驶环境的理解和预测能力使其成为意图预测和路径规划的重要工具,既是开发和验证的手段,也是做出实时驾驶决策的核心技术。

“将生成式AI架构的创新与我们的深度教学技术相结合,产生了一种高度可扩展、资本效率高的生成式AI。WorldGen-1缩小了自动驾驶从模拟到现实的距离,这是简化并统一高端ADAS和Level 4自动驾驶系统开发及验证的关键。”Helm.ai首席执行官、联合创始人Vladislav Voroninski表示,“我们为汽车制造商提供了一种工具,以加速开发、提高安全性并显著缩小模拟与实际测试之间的差距。”

Voroninski补充说:“从WorldGen-1生成数据,就像在真实世界的驾驶环境中创建一个庞大、多样化的数字副本,其丰富程度达到了完整自动驾驶传感器堆栈的水平,并配备了像人类一样思考及预测的智能主体,使我们能够应对自动驾驶中最复杂的挑战。”

关于Helm.ai

Helm.ai致力于为高端ADAS、Level 4自动驾驶和机器人自动化开发下一代人工智能软件。该公司成立于2016年,总部位于美国加利福尼亚州雷德伍德城,Helm.ai重新构想了人工智能软件开发方法,旨在实现真正可扩展的自动驾驶。

MEMS 中国首家MEMS咨询服务平台——麦姆斯咨询(MEMS Consulting)
评论 (0)
  • 下载视频投屏复制链接笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习
    youyeye 2024-09-18 13:33 102浏览
  • 可穿戴设备市场一直在寻找下一个风口。站在2024年来看,智能戒指似乎更有机会。市场调研机构 GMI 最新数据报告显示,2023年智能戒指市场规模达到2.1亿美元,预测2024~2032年将以24.1%的市场复合增长率增长,至2032年达到10亿美元市场规模。图片来源:GMInsights1、走向C位Galaxy Ring,一个曾经的小众品类,却在三星发布会上稳稳占据C位。图片来源网络基于加速度计、光学心率传感器和皮肤温度传感器,Galaxy Ring支持睡眠监测、全天候心率监测、压力水平、身体和
    艾迈斯欧司朗 2024-09-19 15:30 58浏览
  •     FPC 的含义是 Flexible Printed Circuit,柔性/挠性印制板。        (图来自网络,侵删)    FPC使用的基本材料有3种——聚酰亚胺(PI, Polyimide),铜和胶。    制作FPC时,和刚性PCB相似,也是对基本材料进行堆叠,然后热压成型。对于单面FPC,需要用两层PI分别作为载板和盖板,然后在二者之间加一层铜,铜与载板、盖板之间再各
    电子知识打边炉 2024-09-18 22:26 98浏览
  •     DFx是 Design for X(面向产品生命周期各/某环节的设计)的缩写。这个概念是1994年由SMTA(SMT Association)组织提出的,在2000年左右开始在大型公司中应用。    DFA,Assembly 可装配性    DFC,Cost 成本    DFD,Diagnosibility 可诊断分析性    DFE,Enviroment 为环保性着想  &nb
    电子知识打边炉 2024-09-18 21:43 82浏览
  • Adaptive-Sync是什么?近年来电竞屏幕随着电竞产业的蓬勃发展以及游戏玩家对于更高画质、更流畅游戏体验的需求,电竞屏幕成为游戏设备中不可或缺的一环。电竞屏幕市场的概况与发展中,其中很重要的亮点就是高刷新率跟Adaptive-Sync技术的导入,美国视讯电子标准协会(VESA)在推出DisplayPort 1.4 规格标准时,针对电竞产品新增了Adaptive-Sync(可变更新频率)功能,让用户在玩游戏时可以减少画面的撕裂与延迟等现象,提供更平滑的游戏体验,这项功能对于不同刷新率的显示适
    百佳泰测试实验室 2024-09-19 12:29 62浏览
  • 概述       为有效利用海量的路试数据并发挥其价值,经纬恒润推出了OrienLink路试数据分析及开环/闭环回灌测试系统。该系统采用统一的数据存储标准平台,基于云计算技术提供的大规模存储、高带宽和高算力,能够对路试数据进行深入的场景挖掘。通过软件在环(SiL)和硬件在环(HiL)回灌验证,该系统能够充分评估和优化算法性能,发挥数据价值。可解决智能驾驶测试过程中的几类问题:    · 实车测试效率低,无法
    经纬恒润 2024-09-18 18:40 73浏览
  • 故障现象 一辆2013款宝马116i车,搭载N13B16A 发动机,累计行驶里程约为12.1万km。车主反映,该车行驶中偶尔加速无反应,且发动机故障灯异常点亮。 故障诊断接车后试车,故障现象无法再现。用故障检测仪检测,发动机控制单元(DME)中存储有多个与节气门相关的故障代码(图1),分析故障代码,推断故障可能是由节气门翻板过脏,偶尔卡滞引起的。 图1 DME中存储的故障代码拆下节气门总成检查,并不算脏;反复多次直接给节气门电动机短暂供电,节气门翻板打开及回位均无明显异常。用
    虹科Pico汽车示波器 2024-09-19 16:48 63浏览
  • 引言当前车辆诊断主要使用UDS诊断协议,通过诊断功能可实现获取车辆ECU的状态信息及进行数据刷写。但随着汽车架构的日益复杂,数据爆炸及远程诊断等状况逐渐出现,传统的诊断方法已不足以应对这些复杂性和快速变化,因此,SOVD(Service-Oriented Vehicle Diagnostics)诊断协议于2019年在ASAM启动,通过标准化的诊断服务和接口,旨在提高诊断效率、灵活性和准确性,以满足车辆的远程诊断、近端诊断和车内诊断需求。为什么需要SOVD:高效的数据传输:汽车产生的数据量日益增加
    北汇信息 2024-09-18 17:26 105浏览
  • By Toradex胡珊逢简介Verdin AM62 是 Toradex 基于 TI AM623/AM625 SoC 的 Arm 计算机模块。它最多提供 4 个 A53 和 1 个 M4F 处理器。这是 TI 基于其 K3 平台的处理器,虽然和 NXP 的 iMX8M Mini/Plus 都使用 A53 核心,但是由于架构不同,在 Linux 系统中配置外设的方式也不同。文章将介绍如何配置 AM62 的引脚复用关系。硬件介绍Verdin AM62 所使用的 AM623/AM625 处理器的 GP
    hai.qin_651820742 2024-09-18 18:07 48浏览
  • 在ADTF (Automotive Data and Time-Triggered Framework)中,过滤器(Filter)扮演着数据处理的核心角色。过滤器是处理数据流的基本单元,它们接收、处理并发送数据。接下来,将分享ADTF中创建和使用过滤器,包括设置输入输出针脚(Pins)、配置触发器(Triggers)以及处理数据样本(Samples)。一、过滤器基础过滤器是ADTF中用于数据处理和转换的小型处理单元,可以通过特定的接口接收和发送数据,如图1所示。图1 Filter过滤器
    康谋 2024-09-19 09:10 99浏览
  • 下载视频投屏复制链接笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习习笔记&记学习学习笔记&记录学习学习笔记&记录学习习笔记&记录学习学习笔记&记录学习学习笔记记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习学习笔记&记录学习笔记&记录学习习笔记&记学习
    youyeye 2024-09-19 10:56 61浏览
  • 近年来,中国经济正处于转型升级的关键时期,高质量发展成为经济发展的重要目标。在这一伟大征程中,光耦作为一种关键性的电子元器件,正在发挥着重要的作用,助力中国经济迈向更加光明的未来。光耦概念及工作原理▲光耦(光电耦合器)光耦,全称为光电耦合器,是一种将电信号转换为光信号,再由光信号转换回电信号的器件。它由发光器件(通常是LED)和光敏器件(如光敏二极管或光敏晶体管)两部分组成,两者被隔离,以实现输入和输出电路之间的电气隔离。当LED接收到正向电流时,它会发出光线,这些光线通过透明介质照射到对面的光
    晶台光耦 2024-09-19 10:29 53浏览
  • By Toradex秦海1). 简介嵌入式设备对于网络安全的要求越来越高,而 Secure boot就是其中重要的一部分。 TI AM62X 处理器基于行业标准 X.509 认证来提供 Secure boot 启动过程中的 Chain of Trust; X.509 认证是基于公共密钥加密 (Public Key Cryptography) 和数字签名 (Digital Signature) 技术来实现 Secure boot
    hai.qin_651820742 2024-09-18 17:48 70浏览
  • 应用环境与市场需求随着科技不断进步,6K与8K显示器逐渐成为趋势,重新定义了我们对影像质量的期待。6K与8K显示器之所以备受瞩目,主要是因为它们提供了极高的分辨率。举例来说,6K显示器拥有超过6,000像素的水平分辨率,显著提升了影像的细节和清晰度,使用户能够更真实地体验影像的震撼效果;而8K显示器则更进一步将细节度推向新境界,带给用户身临其境般的感受。但随着高分辨率显示器的普及,也带来了挑战,首先是硬件需求的提升,高分辨率需要更强大的处理器和显示适配器来支持,目前6K/8K显示器主要采用最新的
    百佳泰测试实验室 2024-09-19 12:27 71浏览
我要评论
0
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦