机器人已经融入到了我们生活的方方面面,现在酒店、餐饮、娱乐、工业等等各个领域都有机器人在为我们服务。机器人越来越智能,应用场景也越来越多,因此,对底层的芯片处理要求也越来越高,那么机器人怎样才能做到更高效、更智能、更安全呢?6月29日,由Aspencore与深圳市新一代信息通信产业集群联合主办的AIOT 2022国际生态发展大会-智慧机器人分论坛上,安谋科技高级产品经理柴卫华从机器人底层处理器的角度分享了前端采集、处理、后端AI分析以及安全等一系列技术和产品。

机器人已经融入到了我们生活的方方面面,现在酒店、餐饮、娱乐、工业等等各个领域都有机器人在为我们服务。机器人越来越智能,应用场景也越来越多,因此,对底层的芯片处理要求也越来越高,那么机器人怎样才能做到更高效、更智能、更安全呢?

6月29日,由Aspencore与深圳市新一代信息通信产业集群联合主办的AIOT 2022国际生态发展大会-智慧机器人分论坛上,安谋科技高级产品经理柴卫华从机器人底层处理器的角度分享了前端采集、处理、后端AI分析以及安全等一系列技术和产品。

虽然现在行业中有HPC高性能处理器,有NPU、CPU、GPU,但是仅仅有强大的处理还不够,还需要数据,这就需要前端传感器系统,同时如果没有可靠的安全机制,也可能对我们的生活造成不可预估的破坏。

针对这三个方面,安谋科技提出了全场景全域全栈解决方案,包括前端视觉处理器LINLONG“玲珑”,高性能AI处理器Zhouyi(周易)NPU、以及安全处理器Shanhai(山海)。

高效视频处理器:LINLON“玲珑”

现在的视觉处理系统与过去传统的影像完全不一样,以前(十年前)的影像系统主要是捕捉到的图像好不好看,是不是真实没有关系,主要是好看。但今天的影像系统发生了一些翻天覆地的变化,不仅仅要好看,还要看得清、看得远、看得透。整个视觉系统已经从观看转变到感知,譬如像机器人、大型汽车等等都呈现出这样的趋势。

安谋科技的 “玲珑”处理器非常强大,视频源头主流是4K,未来将看到8K甚至8K60这样高吞吐率的产品。

360°视角的挑战

人只有前面两个眼睛,但要让机器人更灵活、更聪明,需要更多摄像头,可能从前到后需要360度的视角。现在的自动驾驶汽车,也是典型的机器人,它从车内、车外到整个车身都布满了摄像头(或者激光雷达),未来机器人可能都是这个趋势。

这对ISP处理器提出了一个很高的挑战,需要同时接入多路的输入源并进行处理。同时因为场景不确定,可能在户外,窗户以及逆光等提出了更高的要求。

这方面,“玲珑”ISP具有8K60FPS处理能力,支持16路摄像头,支持140dB甚至更高的HDR,可以很好的适应各种场景。

全栈解决方案

机器人的覆盖场景非常多,从玩具机器人到专业机器人,对性能方面的要求也完全不一样。

玩具机器人,更多的是考虑能耗和成本,可能一些比较低端、高能效的方案比较合适。

但还有要求高画质的机器人,还有要求高性能的专业机器人,这需要更强劲的高端处理器。

针对这些情况,“玲珑”处理器开发了3系列、5系列、7系列,i3x针对高效能,i5x针对高画质,i7x针对高性能,这三个系列覆盖了整个视觉影像处理的全场景全栈解决方案。

高效视频处理

前面是感知采集数据,有了数据后,海量数据怎么处理?这就同时需要一个比较高效的视频处理器。

这方面,“玲珑”VPU具有2倍的解码性能,减少了30%的带宽,编码效率提升了20%,同时可以做到8K120的高视频支撑,关键产品上面能够支持非常好的性能,除了性能带宽方面,它对图像的质量或者画质也有非常高的提升。

高性能AI处理器:Zhouyi“周易”

除了视频前端的感知和处理,后端还需要强大的数据处理和分析能力。

这方面安谋科技有强大的Zhouyi(周易)NPU,它的性能非常高,从0.2-1000TOPS都可以支持。

ARM在汽车、服务器等方面对NPU性能要求非常高的场景都部署了。低端的譬如小型扫地机器人、智能音箱,覆盖场景非常广,而且对网络的支持也非常友好。小型网络和大型网络的需求不一样,网络方面的特性也不一样,要求处理器能比较好的全面的支持。

机器人的场景跨度比较大,有一些不同的低端场景或者高性能要求场景,对处理器要求也是不一样的,所以安谋科技的处理器设计时,对性能配置和性能编程的划分非常灵活。除了标准的Core,还可以分不同集群,多核、多集群,配置都非常灵活。

机器人的有些领域,特别是工业领域,对安全的要求也非常高。

ARM的“玲珑”ISP和Zhouyi NPU都有认证,可以确保在开发时有很好的安全支持。

Zhouyi NPU的架构非常领先,NPU内部除了特别为神经网络处理的处理器之外,还有行为模式专用加速器,以及标量处理器。这些是一个超长指令集处理器,对视频、声音的处理非常友好。

目前的场景对神经网络的挑战越来越大,更新越来越快,对于处理器的设计要求比较全面,要求支持各种数据格式。Zhouyi NPU支持int4、int8、int12、int16以及fp16、bf16,还支持Winograd。

安全处理器:Shanhai“山海”

当前,对安全可靠性的要求越来越高,特别是与人交互的场景,不能带来误判,给人带来威胁。Shanhai系列处理器的底层有硬件加速器,整个安全架构包括了底层软件以及上层软件全套保驾护航解决方案,可以达到安全可使用的标准。

开发生态

做处理器研发,还要考虑能否快速部署,因此,在开发生态系统时也要做到比较全面。

安谋科技的系列处理器支持现在主流的TensorFlow框架、PYTORCH、Caffe、MXNET、ONNX都要支持,还有一整套软件,包括Compiler等都非常成熟。

在AI时代,对神经网络的处理非常重要,不同的客户要求不一样,安谋科技的编程模式比较灵活,可以支持高层的指令集,也可以支持低层的指令集,能够给客户更大的灵活性。

灵活性带来的一个是高效,一个是性能的提升。 

责编:Challey
本文为EET电子工程专辑原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
阅读全文,请先
您可能感兴趣
机器人可以说是目前最炙手可热的话题,人形机器人和通用人工智能可以说是未来科技行业的制高点,也就在今年10月,工业和信息化部印发《人形机器人创新发展指导意见》,将人形机器人
一些OpenAI员工表示,本次事件的导火索在于公司内的核心矛盾——关于“AI安全”的分歧。强调组织非营利性的另一位联合创始人、董事会成员兼首席科学家伊利亚·萨斯克维尔(Ilya Sutskever)认为,奥特曼以潜在的安全问题为代价,将GPT商业化的速度太快了;奥特曼则非常强调组织营利性……
前段时间,大疆被传在美国被罚60亿美元,双方正在胶着僵持状态。然而,近日,大疆否认了此消息。
文件显示,这套行为准则共包含11项内容,旨在推广全球范围内的安全、可靠和值得信赖的人工智能,并将为开发最先进的人工智能系统的组织提供自愿行动指南,包括最先进的基础模型和生成性人工智能系统。
社交平台X(原推特)上出现的一段画面显示,在日前爆发的新一轮巴以冲突中,巴勒斯坦伊斯兰抵抗运动(哈马斯)使用了伊朗“燕子-2”(Ababil-2)型巡飞弹(自杀无人机)袭击以色列。“燕子-2”在军迷圈中俗称“伊朗小摩托”,是伊朗早年研发的一款巡飞弹……
中国AI产业通过多年的积累,都清楚知道他们自身的真正价值,就是让各行各业更轻松地组建、训练和部署AI。无论是华为“不写诗作画”的盘古,或是阿里腾讯的模型即服务(MaaS)……
根据TrendForce集邦咨询最新OLED技术及市场发展分析报告统计,在近期发表的摺叠新机中,UTG的市场渗透率已逾九成,随着摺叠手机规模持续成长,预估2023年UTG产值将达3.6亿美元;2024年可望挑战6亿美元。
随着终端及IC客户库存陆续消化至较为健康的水位,及下半年iPhone、Android阵营推出新机等有利因素,带动第三季智能手机、笔电相关零部件急单涌现,但高通胀风险仍在,短期市况依旧不明朗,故此波备货仅以急单方式进行。此外,台积电(TSMC)、三星(Samsung)3nm高价制程贡献营收亦对产值带来正面效益,带动2023年第三季前十大晶圆代工业者产值为282.9亿美元,环比增长7.9%。
治精微推出具过压保护OVP、低功耗、高精度运放ZJA3018
无线技术每天都在拯救生命,有些非常方式是人们意想不到的。在美国加利福尼亚州Scotts Valley,一名路过的慢跑者发现一处住宅冒出火焰后,按响了门铃,试图通知屋主。屋主不在家中,但无线门铃连接到了智能家居中枢,提醒屋主慢跑者试图联系。屋主立即向他提供了安全密码,让他跑进房子,从火场中救出了宠物。
来看看,你需不需要这门接收机设计课程吧(已更新八次)。如有需要,现在仍然可以报名。(1)前几天,号友发来她的听课笔记,我真的是泪流满面。感觉,自己这么长时间的备课,总算没白费。说实话,我备课的时候,真
相信每个硬件工程师应该都用过DC-DC,那么分压反馈电阻的取值有没有想过呢?实际应用中大抵都是直接抄的手册中推荐的分压电阻阻值,就算没有正好对应输出电压的分压阻值,也一般是选择接近的电阻大小。但是,总
英伟达(Nvidia)CEO黄仁勋11日表示,将扩大与越南高科技业者的伙伴关系,支持在当地训练研发人工智能(AI)与数字化基础建设领域的人才。黄仁勋还透露在越南设立芯片中心的构想。根据白宫今年9月提升
近日,Wi-Fi联盟宣布Wi-Fi 7规范将于第一季度末最终确定,为企业采用标准化硬件打开大门。 “基于 IEEE 802.11be 技术的 Wi-Fi CERTIFIED 7 将于 2024 年第一
自从集成电路发明以后,人类的电子信息技术开始腾飞,60年多年来,在摩尔定律的指导下,半导体集成电路的高速发展彻底改变了电子产品。以计算机为例,1946年诞生的世界第一台数字计算机重30吨,占地约140
11月9日是主题为“预防为主,生命至上”的第32个全国消防安全日,当天,智能建筑电气技术杂志《IBE Talks》栏目第27期特邀请中国勘察设计协会电气分会副会长、清华大学建筑设计研究院有限公司电气总
广告分割线12月11日,据台媒报道,群创(3481.TW)竹南T1厂员工向媒体爆料,群创竹南T1厂将裁员50%!据报道,群创竹南厂工程师预计将减少一半,在线作业员也预计砍一半。群创今天表示,已于第一时
为加强智慧应急能力建设,以新安全格局服务新发展格局,由中国科学院大学、全国安全职业教育教学指导委员会共同主办的“2023智慧应急发展论坛”于2023年12月10日在京召开。本次论坛主题是“加强智慧应急
本文来源:物联传媒本文作者:市大妈前几年,对大部分人来说,FWA是一个比较陌生的领域,尽管早在3G和4G时代就已经得到一定的发展。后来,随着5G的发展,FWA作为当前5G应用量级最大的场景之一,被更多
点击左上方蓝色“一口Linux”,选择“设为星标”第一时间看干货文章 ☞【干货】嵌入式驱动工程师学习路线☞【干货】一个可以写到简历的基于Linux物联网综合项目☞【干货】Linux嵌入式知识点-思维导