广告

从智能安防到自动驾驶,安霸AI视觉芯片赋能多传感器融合

时间:2022-01-07 11:14:42 作者:顾正书 阅读:
作为AI计算机视觉和视频处理的全球领导者,安霸CVFlow AI开放平台及AI视觉处理器已广泛应用于视频安防、ADAS/自动驾驶、工业机器人和消费电子领域。在2021年底的安博会(CPSE)期间,安霸中国区总经理冯羽涛先生在媒体交流会上向《电子工程专辑》及其他行业媒体介绍了安霸的AI视觉芯片系列产品及行业应用解决方案,并对采用5nm工艺、具有8KP60编码能力的CV5做了详细介绍。
广告

作为AI计算机视觉和视频处理的全球领导者,安霸CVFlow AI开放平台及AI视觉处理器已广泛应用于视频安防、ADAS/自动驾驶、工业机器人和消费电子领域。在2021年底的安博会(CPSE)期间,安霸中国区总经理冯羽涛先生在媒体交流会上向《电子工程专辑》及其他行业媒体介绍了安霸的AI视觉芯片系列产品及行业应用解决方案,并对采用5nm工艺、具有8KP60编码能力的CV5做了详细介绍。

                                                                安霸中国区总经理冯羽涛                                                               

CV5的编解码做到了8K级别,同时可做多路的4K。目前绝大部分4K电视可以达到800万像素,而8K比4K的分辨率提升了4倍,可达到3200万像素,同时可以每秒30帧或60帧的速度进行处理。这颗芯片可支持14个摄像头,单颗处理能力可以达到3200万,每秒60帧。在AI处理能力方面,CV5支持包括TensorFlow、PyTorch、Caffe等主流神经网络架构。安霸提供了一整套成熟的CVflow平台上的工具链,客户可以快速把自己开发的神经网络、AI算法等移植到这一平台,并以高性能、低功耗的方式运行。这种平台化模式对注重品牌和技术创新的公司非常具有吸引力,因为他们可以通过一款产品先切入,从旗舰产品快速扩展,再进行差异化。

安霸CV5 8K AI视觉芯片具有先进的视频编码能力和AI处理能力,以及“磐石”安全架构支撑。(Source: Ambarella)

安霸CV5S芯片框图。(Source: Ambarella)

在ISP方面,CV5可支持RGBIR或多光谱融合技术。业内很多方案采用两个不同的摄像头,一个红外一个可见光,而安霸通过独创的专利技术能够用一个摄像头同时支撑RGB和IR。另外,360度Dewarp鱼眼校正功能已延续多代,在10nm之前的14nm和28nm时代就有,也是专业安防领域颇受欢迎的一项独特功能。

除了智能汽车和传统安防应用之外,安霸的视觉处理芯片还可应用到更多新兴领域。比如在零售方面,可检测货架并进行自动补货。扫地机是最具代表性的消费类机器人,安霸芯片也能帮助客户在这一方面去做一些创新产品。在智能家居方面,为了在摄像头端加入AI功能,安霸推出了AI Timelapse创新功能,可以有效地利用带宽,该功能会自动智能判断,并自动生成一天的摘要。机器视觉主要是与工业自动化4.0相关,安霸的AI芯片也非常适用于传统生产线或大型物流场景的一些专门需求,比如很多大型物流仓库都在使用的AGV车。

汽车辅助驾驶(ADAS)和自动驾驶无疑是安霸AI视觉感知芯片的另一个主要应用市场。最近安霸与傲酷(Oculii)达成了收购协议。傲酷自主研发的AI软件算法可提高雷达的感知能力,让现成的雷达芯片实现分辨率大幅提高(最高可达 100 倍)、探测距离更远以及精度更高。与传统雷达解决方案相比,这种新型的4D毫米波雷达解决方案的功耗和成本更低,可让客户避免使用专门设计、价格高昂的高分辨率雷达芯片。安霸可将傲酷的算法部署在现有的 CVflow系列芯片上,与领先的雷达解决方案一起运行,进一步提升系统的安全性和可靠性。

据安霸中国区市场营销副总裁郄建军介绍,多传感器融合感知是汽车自动驾驶的技术发展方向,视频要和毫米波雷达,甚至与激光雷达融合,才能达到更好的感知效果。如果原始数据在芯片里直接处理融合了,效果会更好,效率会更高。安霸并购傲酷就是提前做芯片层面的原始数据融合感知布局,有了这种“一芯两用”的芯片,以后雷达也可以做成中央集成式雷达,雷达前端射频简化,雷达后端信号处理以及视频融合,都可以在一个域控制器芯片里完成,这样雷达的点云数可以大幅增加,点云像素数据可以做前融合,效果也更好。

安霸中国区市场营销副总裁郄建军

长距离、全天候,全天时的毫米波雷达很好用,但看细节看成像轮廓就不太清楚。摄像头和毫米波雷达融合以后,就可以在全天候场景下做得很好,两者的互补性很强。现在安霸和傲酷联合,雷达和摄像头的信号处理在芯片层面就统一起来了。双方互补性很强,“雷视一体”也是下一代的芯片潮流。

安霸刚刚在CES上发布了最新AI域控制器芯片CV3系列。CV3系列SoC可为汽车行业提供算力高达500 eTOPS的AI处理性能,比安霸上一代车规级SoC CV2系列提高了42倍。CV3搭载了多达16个Arm Cortex-A78AE CPU内核,在支持自动驾驶系统的软件应用所需的CPU性能上,也比上一代芯片CV2提高了30倍。CV3通过单一芯片集成多传感器进行集中化AI感知处理(包括高像素视觉处理、毫米波雷达、激光雷达和超声波雷达)、多传感器深度融合以及自动驾驶车的路径规划,这些卓越的性能助力打造ADAS系统和L2+至L4级自动驾驶系统。即使是在恶劣的光线环境、天气状态和驾驶条件下,基于CV3的AI域控制器也可以实现超强的环境感知能力。

责编:Steve

责编:Steve
本文为EET电子工程专辑 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
顾正书
ASPENCORE资深产业分析师。以深圳为坐标原点,扫描全球电子和半导体行业。专注于China Fabless和SoC设计细分市场的分析和学习,欢迎交流。
  • 收购英特尔闪存之后,SK海力士再与高通投资AI芯片 2021年最后两天,SK海力士完成了对英特尔闪存业务的收购,一周之后,SK海力士再次爆出与高通投资AI芯片。
  • DPU市场,一片混战 据IDC统计,全球算力的需求每3.5个月就会翻一倍,远远超过了当前算力的增长速度。在此驱动下,全球计算、存储和网络基础设施也在发生根本转变,一些在通用CPU上不能得到很好处理的复杂工作负载开始转向智能网卡(SmartNIC)和DPU,以此来减轻CPU内核的负担。
  • 达摩院发布2022十大科技趋势:硅光芯片突破摩尔定律,AI技 12月28日,阿里巴巴达摩院发布2022十大科技趋势,包括AI for Science、大小模型协同进化、硅光芯片、绿色能源AI、柔性感知机器人等。这是达摩院连续第四年发布前沿科技趋势预测。
  • 人工智能全球规范化规则到底需要谁来执行呢?(图文) 人工智能全球化是近年来最火热的话题,不仅是科技界投入巨大,全社会各行各业都在绞尽脑汁的争夺这一还未开垦的处女地。 不仅如此,很多其他行业的人也都在为着人工智能发展做出
  • 购物乌托邦——零售2.0需要什么? 哪些技术在智能零售的实施中发挥了重要作用。当我走进最常逛的超市,不用翻找代币来租用购物车,因为购物车自动从超市入口处的无线充电通道来到我的身边。它报出我的姓名并表示热忱欢迎。 同时,它在带有简单图形的显示器上展露友善的笑颜。作为超市的常客,我拥有一张带姓名的会员卡,并在办卡过程中拍摄了会员照片......
  • 10核GPU真的够用吗?全面解析天玑9000的游戏水平 此前我们写过一篇文章综合评价联发科天玑9000芯片,提到这颗芯片作为明年要大举推向市场的旗舰SoC,有许多令人期待之处。最近一波天玑9000和骁龙8 Gen 1的抢跑成绩,也进一步验证了天玑9000明年定位旗舰的实力——已公开的这波结果也是此前我们没想到的。这其中比较令人惊喜的,是天玑9000的游戏表现……
  • 新款iPad Pro 2021成最受欢迎的 由于采用性能相对强大的M1处理器和mini-LED屏幕以及更多的创新,新款iPad Pro 2021已经成为消费者心目中最受欢迎。然而,iPad 2却已经在全球范围内被列入“复古和过时”的名单中。
  • 三星折叠屏手机Galaxy Z Fold 3 目前来看,折叠屏新机作为一种新的生产力工具,逐渐成为高端/平板的一种趋势,有报料称三星的Galaxy Z Fold 3发布时间或为7月,并且会引入新手势操控。

  • 中国MCU史上单笔约10亿融资,深投控/ 2022年1月,航顺HK32MCU宣布正式完成D轮战略融资
  • RT-Thread通过军用嵌入式操作系统 日前,RT-Thread Space 高可靠性嵌入式实时操作系统完成北京轩宇信息技术有限公司(以下简称“轩宇信息”)第三方测评,测试结论表明 RT-Thread Space 嵌入式实时操作系统满足GJB7718-2012《军用嵌入式操作系统技术要求》和 GJB7706-2012《军用嵌入式操作系统测评要求》的规定,功能正确,通过评测。
  • 2022战略焦点:建设汽车-芯片产业新生态 文︱立厷图︱现场拍摄汽车半导体已成为连接汽车工业和半导体产业的战略焦点,也是汽车产业供应链得以正常运行的重要保障,它不仅关系到汽车生产,还直接影响人们的出行方式和社会经济。在汽车电动化、网联化、智能化
  • 65亿卢比!印度财务部向小米追缴税款 钜亨网消息,由于小米涉嫌逃税并违反印度海关法,印度财政部本周三于印度政府新闻局 (PIB) 发表声明称,印度税收情报局 (DRI) 已向小米科技印度有限公司发出通知,向该公司追缴 65.3 亿卢比(约
  • 【原创视频】3.45网络标签、port端口、离图连接器有什么区别? |本文凡亿教育原创视频,转载请注明来源凡亿是国内领先的电子研发和技术培训提供商,是国家认定的高新技术企业。以“凡亿电路”“凡亿教育”作为双品牌战略,目前近110万电子会员,技术储备为社会持续输送7万余
  • 【爆料】165W超高快充骁龙8旗舰手机入网 关注国产手机最新消息:今天早些时候,有网友发现,红魔游戏手机7已正式入网工信部,该手机的型号为NX679J,拥有绿、黑以及红蓝渐变三种颜色。从入网信息的参数来看,红魔7将搭载一块6.8英寸的OLED屏
  • 【精彩短视频】放大下的SMT立碑现象
  • CES2022上的三家自动驾驶芯片方案 CES2022年带来的很多有趣的东西,在这个舞台主要的亮点是看智能座舱和智能驾驶两部分内容,而这两个领域现在已经形成了比较有趣的格局。●智能座舱高通为主导供应商,通过这个桥头堡在往智能驾驶,也就是所说
  • 【世说芯品】酷炫!用“它”开启你的2022 这件事近两年我们做过的次数比之前二三十年加起来都多体温监测是防疫重要措施之一在疫情防控期间每人每天,不同场合都有可能要经历数次确保“安全距离”的非接触式体温测量既保护了防疫人员,也使测温更快捷因此市场
  • 【EMC案例】晶振设计不合理导致辐射发射RE超标 【干货免费领】540M开关电源案例及学习资料完整版:点我ADI资料合集 | 99%硬件工程师都是用的资料:点我70G硬件设计资料汇总免费送:点我— END —声明:以上文章内容整理于网络,如涉及到版权
  • 中国大陆半导体封装厂列表(2022元旦版) 截止目前,我个人收集的中国大陆半导体封装厂已经有444家了,但其中不包含很多还在规划建设中的工厂。免责声明:本文系网络转载,版权归原作者所有。本文所用视频、图片、文字如涉及作品版权问题,请第一时间告知
  • 51单片机连接ESP8266模块C语言程序 51单片机连接ESP8266模块C语言程序#include[reg52.h> //注意请把‘ [ ’换成 "
广告
热门推荐
广告
广告
广告
EE直播间
在线研讨会
广告
广告
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了