广告

生物仿真硅耳蜗实现神经拟态技术关键词捕捉

2021-04-12 Sunny Bains 阅读:
苏黎世神经科学研究所开发的动态音频传感器的核心是一个生物仿真硅耳蜗,仿真耳朵中毛细胞的功能。由硅耳蜗产生的事件串流可用于语音端点检测(关键词识别的第一阶段),类耳蜗图可以由神经网络读入并解码其含义。关键词捕捉是目前各种神经拟态技术的一个重要目标。

我们使用的传感和计算设备无处不在,而且会不断增多,设备始终处于工作状态,因此功率变得越来越重要。最好的例子就是放在办公桌上、口袋里以及散布家中各处的声控设备。关键词捕捉是目前各种神经拟态技术的一个目标。Qq6ednc

硅耳蜗

2020年,神经拟态工程学Misha Mahowald奖的获得者是Shih-Chii Liu教授及其团队,他们一直致力于研究低延迟、低功率传感器,用于语音检测。苏黎世神经科学研究所(INI)的Shi-Chii Liu及其团队开发的动态音频传感器拓展了这一市场(图1)。传感器的核心是一个生物仿真硅耳蜗。首先,它利用一组模拟带通滤波器将输入的声音滤入到各个频道,并在输出侧对其进行半波整流。这组电路仿真耳朵中毛细胞的功能。Qq6ednc

Qq6ednc

图1:A.在常见的音频系统中,声音首先通过模数转换器转换成数字信号,然后使用数字快速傅立叶变换(FFT)和带通滤波(BPF)提取信号特征。这些信号由数字信号处理器(DSP)运行语音端点检测(VAD)或自动语音识别算法进行处理。B.在苏黎世INI的动态音频传感器中,接收信号为模拟音频频带,其特征和变化被并行编码成一系列的异步尖峰信号(事件),随后进行处理。Qq6ednc

这一过程类似于生物学中让不同通道为大脑的处理做好准备。在人耳中,神经节细胞将信号快速编码为一串化学离子;在硅耳蜗中,则被转换成电尖峰信号。这一步可以通过使用常用的IF神经元模型或异步增量调制器(ADM)来完成:ADM将信号与两个阈值进行比较,并在信号超过阈值时发送事件——相当于信号特征提取器。因为忽略了不变的信号,从而减少了传递到下一级的冗余信息。Qq6ednc

从功率的角度来看,在没有任何活动时,硅耳蜗几乎不会消耗任何电量,随着活动的增加,尖峰信号的数量也随之增加。对于一直在听却很少进行处理的应用而言,这是一个巨大的优势;而当应用一直需要对相关内容进行解码时,则没有明显的功耗优势。Qq6ednc

由于这种音频传感器的功耗只有几微瓦,系统设计人员在设计中可以将其作为一个很有用的选择,以便提高电源效率。此外,该音频传感器是在连续时间内工作,尖峰之间的距离可近可远,因此它也支持非常高的动态范围。Qq6ednc

语音识别

这项工作的关键是证明硅耳蜗的有用性,具体而言,就是由硅耳蜗产生的事件串流可以用于语音端点检测(关键词识别的第一阶段)等实际应用中。Liu和她的团队成功地做到了,他们使用事件输出来创建2D数据帧,尖峰信号到达的直方图在5ms的帧上按频率排列。这即是类耳蜗图,可以由神经网络读入并解码其含义。Qq6ednc

“IEEE ISSCC社群对在传感器上使用深度网络非常感兴趣,音频边缘计算正在兴起,深度网络出现得非常及时。”Liu说,“现在已经有很多利用低功耗专用集成电路(ASIC)进行关键词识别的论文,但这些论文都采用类似频谱图的常规功能。我们的一个目标是要证明混合方案(混合模拟信号设计)可以提供更低的功率,减少响应延迟。”Qq6ednc

去年INI发布了一段视频,展示了数字识别系统。该系统现在仍处于开发初期,还不是绝对可靠。Liu的团队成员还有Minhao Yang、Chang Gao、Enea Ceolini、Adrian Huber、Jithendar Anumula、Ilya Kiselev和Daniel Neil,多年来他们还研究了传感器融合,将音频和视频信息结合起来,以进行更可靠的分类。他们一直遵循初期的设计准则来决定什么时候应该选择模拟传感器,什么时候应使用数字传感器。Qq6ednc

Qq6ednc

图2:Misha Mahowald是地址事件表示法(AER)的发明者之一,“神经拟态工程奖”就是以她的名字命名的。Qq6ednc

他们的另一个目标是提高数据采集系统(DAS)的电源效率和性能,包括利用源极跟随器实现带通滤波器,以及设计模拟特征提取器。Qq6ednc

减少模拟电子器件易变性的影响是另一个重要的研究领域。为了解决这个问题,Liu及其团队设计了一个硬件仿真器。他们表示,与Cadence Virtuoso这样的商用软件相比,该仿真器可以更快地测试这些问题。使用软件而非硬件来训练二进制神经网络进行分类,能够准确预测多种测试芯片的分类性能。Liu及其团队正在考虑在系统中增加噪音来测试其易变性,使设计过程更加稳健。Qq6ednc

Mahowald奖

Liu是神经拟态工程学的早期研究者之一,她在加州理工Carver Mead的实验室工作过,是苏黎世神经信息学研究所的创始人之一,当时研究组许多人员离开加州前往苏黎世。Mahowald(图2)也曾在该实验室工作。Qq6ednc

在获得该奖项时,Liu说:“我们很荣幸能够获得这个奖项,特别是与这么多神经拟态工程学的优秀研究人员一起。这项工作建立在数十年早期硅耳蜗设计的基础上,是Dick Lyon、Carver Mead、Lloyd Watts、Rahul Sarpeshkar、Eric Vittoz和Andre van Schaik的工作的延续。Qq6ednc

谈到神经拟态工程学的重要性,她说:“即便摩尔定律走到尽头,数字计算的能效仍比生物学的落后,只有其千分之一。因此,DAS这类混合模拟电子系统能达到什么样的效率比以往任何时候都更加重要。”Qq6ednc

(本文授权编译自EDN姐妹网站EETimes,原文参考链接:Allowing Machines to Listen, and Understand,由Jenny Liao编译)Qq6ednc

本文为《电子技术设计》2021年4月刊杂志文章,版权所有,禁止转载。免费杂志订阅申请点击这里Qq6ednc

本文为EDN电子技术设计 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
  • 微信扫一扫
    一键转发
  • 最前沿的电子设计资讯
    请关注“电子技术设计微信公众号”
  • 酒店房间装有摄像头?防偷窥神器是怎样检测出的? EDN小编在某科技类微信群看到了一条关于“酒店马桶内装有摄像头,用防偷拍神器可以检测到”的短视频,群里的科技大拿们对此展开了热烈讨论。有人提问说,这到底是摄像头还是智能马桶的红外感应器?有人说,看来智慧家居给偷拍产业提供了隐藏。还有人认为,这很可能是女主播为了带货拍的广告视频……那么事情的真相是什么?
  • iPhone 14 Pro 将采用“药丸+圆孔”双孔设计 传闻称苹果计划在今年推出的iPhone 14系列的部分机型上,更改刘海屏设计,iPhone 14 Pro和 14 Pro Max 将采用药丸形切口设计,可容纳Face ID元素和自拍相机的第二个孔。
  • 小型太阳能光伏电源的串联与并联线性稳压对比 对小型太阳能光伏阵列而言,使用线性稳压方案会比较简单。本设计实例将针对此类系统解读,重点关注串联稳压器拓扑与并联稳压器拓扑的相对优势。
  • Ignion选用AWS云服务来变革物联网设计流程 Ignion宣布推出天线设计智能云服务Antenna Intelligence Cloud,该服务将云计算和人工智能功能引入到天线领域。
  • 使用BLDC电机助力机械扫描激光雷达实现360度视场 激光雷达系统的视场 (FOV) 决定了激光雷达能够捕捉到的图像的宽度,因此该视场对于自动驾驶决策算法十分重要。扩大FOV的方法有很多种,其中之一就是利用机械扫描,使用电机帮助实现360度FOV。无刷直流 (BLDC) 电机可以实现此目标,且高效低噪,因此广受欢迎。
  • 台积电、联电校招万人,业内人士:行业薪资达十年来最高水 近日,台积电、联电开启了校招活动,其中,台积电预计招募超过8000名新员工、联电预计招募 2000 名人才,硕士毕业工程师平均年薪上看200万新台币,约合人民币45万元。晶圆厂们大手笔扩招源于晶圆厂们2021年的“疯狂”扩产。
  • 黑客“开源”英伟达后续:开源三星源代码,下一个是高通 此前英伟达遭到了黑客组织的网络攻击,导致超过1TB的数据泄露,由于与英伟达交涉不畅,黑客组织现在正试图将窃取的信息出售给第三方。与此同时,黑客又“帮”三星把代码给开源了,顺便还把高通也捎上了。
  • 意法半导体先进的MEMS传感器助您开启Onlife时代 ST第三代技术提高准确度和能效,附加功能包括边缘机器学习和静电感测
  • 被二十余家科技巨头“制裁”,俄罗斯反击:停供美国火箭发 随着俄罗斯与乌克兰冲突的持续升级,以美国为首的北约成员国和欧洲国家纷纷对俄罗斯宣布制裁,不少科技行业也加入了制裁俄罗斯的队伍。如英特尔、AMD断供,苹果在俄停售,美国社交平台“禁言”俄罗斯媒体、甲骨文、SAP等云巨头停服俄罗斯等,但值得一提的是,俄罗斯也进行了反击。不仅停止了向美国交付火箭发动机,终止两国在国际空间站的实验合作,还启用本国互联网 Runet。
  • PCIe 5.0连接器线缆详细信息曝光,最高支持600W 日前,Twitter 用户@momomo_us透露了进一步研究 PCIe Gen 5.0 连接器标准的图片和内容。根据泄漏者 @momom_us 发布的 PPT显示,即将推出的 PCIe Gen5 显卡标准官方名称为“12VHPWR”,负责定义 ATX 规格的英特尔数据显示,该接口将支持 4 种电源配置,分别为 150W、300W、450W、600W。
  • 英特尔、AMD、Arm等九大企业宣布UCIe开放标准,推动Chip 英特尔、AMD、Arm 和所有领先的代工厂商齐聚一堂,包括高通、三星、台积电、日月光,以及Google Cloud、Meta、微软,宣布他们正在为小芯片互连制定一个新的开放标准Universal Chiplet Interconnect Express (UCIe),希望以UCIe 1.0规范建立芯片互连、兼容运作,让更多业者能依照此标准打造新款处理器,并且能配合不同微芯片建构差异化设计。
  • 英伟达被黑客组织勒索,网友从泄露数据中挖出核心机密信 NVIDIA近日被南美黑客组织勒索攻击一事引起了网友的关注。不同于竞品中的AMD FSR采样技术和英特尔XeSS采样技术,英伟达之前从未公布过DLSS的源代码,很不愿意将这个大量挣钱的独有技术给开源了。部分获得了这些数据的人已经开始了对代码的分析、并试图弄懂DLSS的工作原理。
广告
热门推荐
广告
广告
EE直播间
在线研讨会
广告
广告
面包芯语
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了