广告

让机器听得见,也听得懂

时间:2021-04-28 作者:Sunny Bains 阅读:
苏黎世神经科学研究所(INI-Zurich)的研究团队致力于开发低延迟、低功率的语音检测传感器。在此传感器的核心是一个生物模拟的硅耳蜗,功耗仅几微瓦(µW),可望为系统设计人员在设计时带来更具电源效率的选择…
广告
电子工程专辑 EE Times China -提供有关电子工程及电子设计的最新资讯和科技趋势

我们使用的传感和计算设备无处不在,而且会不断增多,设备始终处于工作状态,因此功率变得越来越重要。最好的例子就是放在办公桌上、口袋里以及散布家中各处的声控设备。关键词捕捉是目前各种神经拟态技术的一个目标。

硅耳蜗

2020年,神经拟态工程学Misha Mahowald奖的获得者是Shih-Chii Liu教授及其团队,他们一直致力于研究低延迟、低功率传感器,用于语音检测。苏黎世神经科学研究所(INI)的Shi-Chii Liu及其团队开发的动态音频传感器拓展了这一市场(图1)。传感器的核心是一个生物仿真硅耳蜗。首先,它利用一组模拟带通滤波器将输入的声音滤入到各个频道,并在输出侧对其进行半波整流。这组电路仿真耳朵中毛细胞的功能。

图1:A.在常见的音频系统中,声音首先通过模数转换器转换成数字信号,然后使用数字快速傅立叶变换(FFT)和带通滤波(BPF)提取信号特征。这些信号由数字信号处理器(DSP)运行语音端点检测(VAD)或自动语音识别算法进行处理。B.在苏黎世INI的动态音频传感器中,接收信号为模拟音频频带,其特征和变化被并行编码成一系列的异步尖峰信号(事件),随后进行处理。

这一过程类似于生物学中让不同通道为大脑的处理做好准备。在人耳中,神经节细胞将信号快速编码为一串化学离子;在硅耳蜗中,则被转换成电尖峰信号。这一步可以通过使用常用的IF神经元模型或异步增量调制器(ADM)来完成:ADM将信号与两个阈值进行比较,并在信号超过阈值时发送事件——相当于信号特征提取器。因为忽略了不变的信号,从而减少了传递到下一级的冗余信息。

从功率的角度来看,在没有任何活动时,硅耳蜗几乎不会消耗任何电量,随着活动的增加,尖峰信号的数量也随之增加。对于一直在听却很少进行处理的应用而言,这是一个巨大的优势;而当应用一直需要对相关内容进行解码时,则没有明显的功耗优势。

由于这种音频传感器的功耗只有几微瓦,系统设计人员在设计中可以将其作为一个很有用的选择,以便提高电源效率。此外,该音频传感器是在连续时间内工作,尖峰之间的距离可近可远,因此它也支持非常高的动态范围。

语音识别

这项工作的关键是证明硅耳蜗的有用性,具体而言,就是由硅耳蜗产生的事件串流可以用于语音端点检测(关键词识别的第一阶段)等实际应用中。Liu和她的团队成功地做到了,他们使用事件输出来创建2D数据帧,尖峰信号到达的直方图在5ms的帧上按频率排列。这即是类耳蜗图,可以由神经网络读入并解码其含义。

“IEEE ISSCC社群对在传感器上使用深度网络非常感兴趣,音频边缘计算正在兴起,深度网络出现得非常及时。”Liu说,“现在已经有很多利用低功耗专用集成电路(ASIC)进行关键词识别的论文,但这些论文都采用类似频谱图的常规功能。我们的一个目标是要证明混合方案(混合模拟信号设计)可以提供更低的功率,减少响应延迟。”

去年INI发布了一段视频,展示了数字识别系统。该系统现在仍处于开发初期,还不是绝对可靠。Liu的团队成员还有Minhao Yang、Chang Gao、Enea Ceolini、Adrian Huber、Jithendar Anumula、Ilya Kiselev和Daniel Neil,多年来他们还研究了传感器融合,将音频和视频信息结合起来,以进行更可靠的分类。他们一直遵循初期的设计准则来决定什么时候应该选择模拟传感器,什么时候应使用数字传感器。

图2:Misha Mahowald是地址事件表示法(AER)的发明者之一,“神经拟态工程奖”就是以她的名字命名的。

他们的另一个目标是提高数据采集系统(DAS)的电源效率和性能,包括利用源极跟随器实现带通滤波器,以及设计模拟特征提取器。

减少模拟电子器件易变性的影响是另一个重要的研究领域。为了解决这个问题,Liu及其团队设计了一个硬件仿真器。他们表示,与Cadence Virtuoso这样的商用软件相比,该仿真器可以更快地测试这些问题。使用软件而非硬件来训练二进制神经网络进行分类,能够准确预测多种测试芯片的分类性能。Liu及其团队正在考虑在系统中增加噪音来测试其易变性,使设计过程更加稳健。

Mahowald奖

Liu是神经拟态工程学的早期研究者之一,她在加州理工Carver Mead的实验室工作过,是苏黎世神经信息学研究所的创始人之一,当时研究组许多人员离开加州前往苏黎世。Mahowald(图2)也曾在该实验室工作。

在获得该奖项时,Liu说:“我们很荣幸能够获得这个奖项,特别是与这么多神经拟态工程学的优秀研究人员一起。这项工作建立在数十年早期硅耳蜗设计的基础上,是Dick Lyon、Carver Mead、Lloyd Watts、Rahul Sarpeshkar、Eric Vittoz和Andre van Schaik的工作的延续。

谈到神经拟态工程学的重要性,她说:“即便摩尔定律走到尽头,数字计算的能效仍比生物学的落后,只有其千分之一。因此,DAS这类混合模拟电子系统能达到什么样的效率比以往任何时候都更加重要。”

编译:Jenny Liao, EDN China

本文授权编译自EETimes,本文为《电子技术设计》2021年4月刊杂志文章,版权所有,禁止转载。免费杂志订阅申请点击这里

原文参考链接:Allowing Machines to Listen, and Understand

 

电子工程专辑 EE Times China -提供有关电子工程及电子设计的最新资讯和科技趋势
本文为EET电子工程专辑 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
  • 微芯片设计将推动AI实时边缘计算 AI边缘计算是AI+边缘计算结合的深度应用,然而,在实时性方面,AI边缘计算一直未有突破。不过,最近的微芯片设计将有力的推动这一领域的发展。
  • 传统的设计方法和工具达到极限,EDA将如何应对SoC设计挑 随着系统复杂性的不断提高,SoC设计团队承受着越来越大的压力,他们要以前所未有的更低成本和更短时间交付更高效的产品,而传统的设计方法和工具已达到极限。电子设计自动化(EDA)必须不断突破才能应对不断发展的SoC设计挑战。
  • 通过无排放绿色能源系统实现智慧城市的碳中和战略目标 城市正发展得越来越壮大,越来越有韧性,但要真正实现繁荣,城市还需要一个更强大、更智能、更绿色的能源系统。最近,我们与日立ABB电网公司(Hitachi ABB Power Grids)电网整合(Grid Integration)业务的产品管理和策略主管André Burdet进行了交谈,讨论了可再生能源、交通运输和数字网络该如何发展,以满足城市的需求。
  • 构建AI生态:除了GPU、DPU和CPU,还需要什么? 刚刚结束的GTC 2021,首日keynote英伟达CEO黄仁勋几乎将全部注意力都放在了AI和数据中心。今年GTC大部分人关注的可能是英伟达补全“缺失的最后一块拼图”:Grace CPU的发布,实则也只是是英伟达正在补全AI各方面能力的一部分。
  • 拆解海康威视智能热成像摄像机,关键器件来自华为海思和 海康威视(Hikvision)开发的热成像摄像机之所以吸引System Plus Consulting的原因在于其人工智能(AI)功能。在System Plus Consulting看来,该热成像摄像机的亮点在于结合了东西方设计的精华——中国制造的微测辐射热计和摄影机处理器,以及非中国的AI/模拟等处理组件…
  • 传奇AI公司现身超算中心,心中对手只有英伟达 Habana Labs日前宣布,其人工智能(AI)训练和推理加速器将为加州大学圣地亚哥分校圣地亚哥超级计算机中心(SDSC)的Voyager超级计算机提供高性能的AI计算能力,计划于2021年秋季投入使用。
  • Intel 11代酷睿1处理器正式发布:10 今晚,Intel发布的11带酷睿处理器采用10nm制程,面向高性能移动桌面版。同时发布的还有同样架构的至强W-11000系列,面向高性能移动工作站。
  • AMD RX 6600系列或配备8GB显存 MD的RX 6600系列可能配备的不是之前传闻的6或12GB显存,二是8GB。可能包含64MB的内置Infinity Cache。
  • Qorvo® Biotechnologies公司赢得 移动应用、基础设施与航空航天、国防应用中RF创新解决方案的领先供应商 Qorvo®, Inc.(纳斯达克代码:QRVO)凭借“快速诊断提速” (RADxSM) 计划中标,赢得美国国立卫生研究院 (NIH) 的 2440 万美元合同。Qorvo Biotechnologies(Qorvo 的全资子公司)公司赢得此合同有助于推动 Qorvo Omnia™ 诊断测试平台的生产,加快市场投放进程。
  • 美光发布第六次年度可持续发展报告 内存和存储解决方案领先供应商Micron Technology Inc.近日发布《快步前行:美光 2021 年可持续发展报告》(Fast Forward: Micron’s 2021 Sustainability Report),凸显美光在特殊时期不但体现出企业韧性,更在促进创新、人、社区和制造等方面取得长足进展。
  • PCB工程师需要了解的几个设计指南 在开始新设计时,因为将大部分时间都花在了电路设计和元件的选择上,在PCB布局布线阶段往往会因为经验不足,考虑不够周全。如果没有为PCB布局布线阶段的设计提供充足的时间和精力,可能会导致设计从数字领域转
  • 漫画:到底什么是耦合? 在电路中,将前级电路(信号源)的能量递至后级电路(负载)称为耦合,常见的耦合介质有导线、电容器,变压器、光电耦合器。根据不同耦合介质常见有以下耦合方式,这几种耦合方式各有特点,在不同哪种比较好?END
  • 美国将小米移出“黑名单”?中方回应 ▲ 了解更多精彩内容 点击上方蓝字关注我们5月12日,外交部发言人华春莹主持例行记者会。有记者就美国政府将小米公司移出“黑名单”一事提问。华春莹表示,你提到的有关情况我不了解,建议
  • 新松:撤销服务机器人部门 着力推进工业机器人 公司调整整体业务战略,撤销服务机器人部门,着力于工业机器人产业布局。文|网络新松机器人5月11日下午举办2020年度业绩说明会。公司副董事长兼总裁曲道奎回答投资者提问时表示,公司调整整体业务战略,基于
  • 美国科技巨头组建“半导体联盟” 呼吁政府提供补贴 ▲ 了解更多精彩内容 点击上方蓝字关注我们本周二,苹果、微软、谷歌等科技巨头与英特尔等芯片制造商,联合组建了一个新的游说团体——美国半导体联盟(Semiconductors in
  • 高通或转单台积电!  中国半导体论坛 振兴国产半导体产业!    当前主要安卓厂商每年的出货主力都少不了搭载高通旗舰芯片的手机,去年12月,骁龙888隆重登场,并且改用三星5nm代工。不过,
  • 深度丨智能驾驶的“两面派”竞争:激光雷达VS视觉算法 ·聚焦:人工智能、芯片等行业欢迎各位客官关注、转发前言:当下,汽车行业开始迈入智能化、网联化的新时代,作为定义汽车智能网联进程的核心维度,自动驾驶技术已然成为衡量进程的关键指标,这对汽车感知系统就提出
  • C语言逆向之循环结构分析 C语言的循环结构有for循环、while循环、do循环和goto循环。本文介绍前3种循环方式。1. for循环结构for循环也可以称为步进循环,它的特点是常用于已经明确了循环的范围。看一个简
  • 突发!小米被美国移出“黑名单”!  中国半导体论坛 振兴国产半导体产业!    5月12日消息,据彭博报道,根据当地时间周二提交给美国法院的一份文件,小米公司和美国政府达成协议,将搁置特朗普政府将该公司列
  • 39家企业参与新4项团体标准制定 已发布团体标准6项,2021年新制定团体标准4项。文|新战略2019年6月,中国移动机器人(AGV/AMR)产业联盟标准管理委员会正式成立,经过两年时间的发展,标委会体系逐渐完善,专家队伍日渐壮大,当
广告
热门推荐
广告
广告
广告
EE直播间
在线研讨会
广告
广告
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了