广告

生物仿真硅耳蜗实现神经拟态技术关键词捕捉

2021-04-12 10:04:06 Sunny Bains 阅读:
苏黎世神经科学研究所开发的动态音频传感器的核心是一个生物仿真硅耳蜗,仿真耳朵中毛细胞的功能。由硅耳蜗产生的事件串流可用于语音端点检测(关键词识别的第一阶段),类耳蜗图可以由神经网络读入并解码其含义。关键词捕捉是目前各种神经拟态技术的一个重要目标。

我们使用的传感和计算设备无处不在,而且会不断增多,设备始终处于工作状态,因此功率变得越来越重要。最好的例子就是放在办公桌上、口袋里以及散布家中各处的声控设备。关键词捕捉是目前各种神经拟态技术的一个目标。GTAednc

硅耳蜗

2020年,神经拟态工程学Misha Mahowald奖的获得者是Shih-Chii Liu教授及其团队,他们一直致力于研究低延迟、低功率传感器,用于语音检测。苏黎世神经科学研究所(INI)的Shi-Chii Liu及其团队开发的动态音频传感器拓展了这一市场(图1)。传感器的核心是一个生物仿真硅耳蜗。首先,它利用一组模拟带通滤波器将输入的声音滤入到各个频道,并在输出侧对其进行半波整流。这组电路仿真耳朵中毛细胞的功能。GTAednc

GTAednc

图1:A.在常见的音频系统中,声音首先通过模数转换器转换成数字信号,然后使用数字快速傅立叶变换(FFT)和带通滤波(BPF)提取信号特征。这些信号由数字信号处理器(DSP)运行语音端点检测(VAD)或自动语音识别算法进行处理。B.在苏黎世INI的动态音频传感器中,接收信号为模拟音频频带,其特征和变化被并行编码成一系列的异步尖峰信号(事件),随后进行处理。GTAednc

这一过程类似于生物学中让不同通道为大脑的处理做好准备。在人耳中,神经节细胞将信号快速编码为一串化学离子;在硅耳蜗中,则被转换成电尖峰信号。这一步可以通过使用常用的IF神经元模型或异步增量调制器(ADM)来完成:ADM将信号与两个阈值进行比较,并在信号超过阈值时发送事件——相当于信号特征提取器。因为忽略了不变的信号,从而减少了传递到下一级的冗余信息。GTAednc

从功率的角度来看,在没有任何活动时,硅耳蜗几乎不会消耗任何电量,随着活动的增加,尖峰信号的数量也随之增加。对于一直在听却很少进行处理的应用而言,这是一个巨大的优势;而当应用一直需要对相关内容进行解码时,则没有明显的功耗优势。GTAednc

由于这种音频传感器的功耗只有几微瓦,系统设计人员在设计中可以将其作为一个很有用的选择,以便提高电源效率。此外,该音频传感器是在连续时间内工作,尖峰之间的距离可近可远,因此它也支持非常高的动态范围。GTAednc

语音识别

这项工作的关键是证明硅耳蜗的有用性,具体而言,就是由硅耳蜗产生的事件串流可以用于语音端点检测(关键词识别的第一阶段)等实际应用中。Liu和她的团队成功地做到了,他们使用事件输出来创建2D数据帧,尖峰信号到达的直方图在5ms的帧上按频率排列。这即是类耳蜗图,可以由神经网络读入并解码其含义。GTAednc

“IEEE ISSCC社群对在传感器上使用深度网络非常感兴趣,音频边缘计算正在兴起,深度网络出现得非常及时。”Liu说,“现在已经有很多利用低功耗专用集成电路(ASIC)进行关键词识别的论文,但这些论文都采用类似频谱图的常规功能。我们的一个目标是要证明混合方案(混合模拟信号设计)可以提供更低的功率,减少响应延迟。”GTAednc

去年INI发布了一段视频,展示了数字识别系统。该系统现在仍处于开发初期,还不是绝对可靠。Liu的团队成员还有Minhao Yang、Chang Gao、Enea Ceolini、Adrian Huber、Jithendar Anumula、Ilya Kiselev和Daniel Neil,多年来他们还研究了传感器融合,将音频和视频信息结合起来,以进行更可靠的分类。他们一直遵循初期的设计准则来决定什么时候应该选择模拟传感器,什么时候应使用数字传感器。GTAednc

GTAednc

图2:Misha Mahowald是地址事件表示法(AER)的发明者之一,“神经拟态工程奖”就是以她的名字命名的。GTAednc

他们的另一个目标是提高数据采集系统(DAS)的电源效率和性能,包括利用源极跟随器实现带通滤波器,以及设计模拟特征提取器。GTAednc

减少模拟电子器件易变性的影响是另一个重要的研究领域。为了解决这个问题,Liu及其团队设计了一个硬件仿真器。他们表示,与Cadence Virtuoso这样的商用软件相比,该仿真器可以更快地测试这些问题。使用软件而非硬件来训练二进制神经网络进行分类,能够准确预测多种测试芯片的分类性能。Liu及其团队正在考虑在系统中增加噪音来测试其易变性,使设计过程更加稳健。GTAednc

Mahowald奖

Liu是神经拟态工程学的早期研究者之一,她在加州理工Carver Mead的实验室工作过,是苏黎世神经信息学研究所的创始人之一,当时研究组许多人员离开加州前往苏黎世。Mahowald(图2)也曾在该实验室工作。GTAednc

在获得该奖项时,Liu说:“我们很荣幸能够获得这个奖项,特别是与这么多神经拟态工程学的优秀研究人员一起。这项工作建立在数十年早期硅耳蜗设计的基础上,是Dick Lyon、Carver Mead、Lloyd Watts、Rahul Sarpeshkar、Eric Vittoz和Andre van Schaik的工作的延续。GTAednc

谈到神经拟态工程学的重要性,她说:“即便摩尔定律走到尽头,数字计算的能效仍比生物学的落后,只有其千分之一。因此,DAS这类混合模拟电子系统能达到什么样的效率比以往任何时候都更加重要。”GTAednc

(本文授权编译自EDN姐妹网站EETimes,原文参考链接:Allowing Machines to Listen, and Understand,由Jenny Liao编译)GTAednc

本文为《电子技术设计》2021年4月刊杂志文章,版权所有,禁止转载。免费杂志订阅申请点击这里GTAednc

本文为电子技术设计原创文章,未经授权禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
  • 微信扫一扫
    一键转发
  • 最前沿的电子设计资讯
    请关注“电子技术设计微信公众号”
  • 商务部暂停天然砂对台湾地区出口,台积电难受了 据EDN电子技术设计了解,商务部网站8月3日早晨8点发布最新消息,表示将从即日起暂停天然砂对台湾地区出口。不少网友认为暂停天然砂对台湾地区的出口,此举将严重影响台湾的建筑业,实则影响不仅仅如此。台湾地区天然砂进口量的90%以上来自大陆,而台湾芯片占台湾2021年出口额的34.8%。网友称商务部暂停天然砂对台湾地区出口是捏到了台湾半导体制造业的七寸。
  • 波兰网友拆德国产电源插排,内部竟是中国制造?! 本文将会介绍LogiLink LPS262U电源插排(接线板)——包含三个USB端口和两个Schuko插座——的内部结构及其简短测试。
  • 华盛顿大学首创用人体热能为可穿戴电子设备供电 从健康和健身追踪器到虚拟现实设备,可穿戴电子产品已成为我们日常生活的一部分,但找到持续为这些设备供电的方法是一项挑战。华盛顿大学的研究人员开发了一种创新的解决方案:首创的柔性、可穿戴热电设备,可将体热转化为电能。
  • 深圳允许完全自动驾驶车辆上路,主驾无需坐人 据EDN电子技术设计引援央视财经报道,从8月1日开始,《深圳经济特区智能网联汽车管理条例》正式实施,智能网联汽车列入国家汽车产品目录或者深圳市智能网联汽车产品目录,这也让深圳成为了国内首个允许L3级别自动驾驶车辆合法上路的城市。
  • 理想ONE高速起火烧成光架,其1.2T三缸增程器曾被指隐藏 近期,网络平台上发布了一段理想ONE在行驶过程中,车辆出现起火的视频内容。现场拍摄的灭火后图片显示,该轿车过火后仅剩骨架,车辆前部增程器位置受损严重,车辆尾门已经在过火后从车身主体脱落。此前,曾有国内汽车媒体对一台行驶了10万公里的理想ONE的东安1.2T三缸增程发动机进行拆解,被指隐藏暗病。
  • 仿真器智能,工程师更聪明! 不要过度依赖SPICE仿真器的自动设定,因为过度相信自动化有时可能引发错误。请记得:仿真器智能,工程师更聪明!
  • 上海微系统所使用石墨烯纳米带研制出世界上最小尺寸的 非易失性相变随机存取存储器(PCRAM)被认为是大数据时代新兴海量存储的有希望的候选者之一。然而,相对较高的编程能量阻碍了 PCRAM 中功耗的进一步降低。利用石墨烯的窄边接触可以有效降低每个电池中相变材料的活性体积,从而实现低功耗运行。
  • 可解决工业自动化和IIoT挑战的MCU 工业自动化和工业物联网(IIoT)设计人员的性能要求不断变化。就MCU而言,他们希望获得更快的处理速度、更多的内存、更好的连接性和更多的安全功能。
  • 我国建成开通5G基站数达185.4万个 工信部近日透露,截至2022年6月底,中国5G基站数达到185.4万个,其中二季度新增基站近30万个,已建成全球规模最大、技术领先的网络基础设施,实现“县县通5G、村村通宽带”。。
  • 苹果发布2022财年第三财季业绩,营收829.59亿美元 Apple 今日公布了 2022 年第三财季的财务业绩。报告显示,苹果公司第三财季公布收入为 829.59亿美元,去年同期为 814 亿美元,同比增长2%;季度净利润为 194 .4亿美元,去年同期为217 亿美元,同比下降10.6%;其中,iPhone带来的营收406.7亿美元,同比增长3%。
  • 工程师开发出可以看到身体内部的贴纸 麻省理工学院的工程师设计了一种贴片,可以产生身体的超声图像。这种邮票大小的设备贴在皮肤上,可以提供 48 小时内脏器官的连续超声成像。
  • 美国参议院批准价值2460亿美元的芯片法案 美国参议院周三通过立法,以超过 750 亿美元支持国内半导体产业。GlobalFoundries、英特尔、三星代工厂、德州仪器、台积电和其他在美国建立半导体制造设施的公司或将受益。
广告
热门推荐
广告
广告
EE直播间
在线研讨会
广告
广告
面包芯语
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了