近日,清华大学精密仪器系类脑计算研究中心团队在国际学术期刊《自然》上发表封面文章,宣布研制出世界首款类脑互补视觉芯片——“天眸芯”。这一技术的突破,为智能系统在开放世界中的稳定性和安全性提供了新的解决方案。
2024年5月30日《自然》杂志封面
传统智能系统所使用的视觉感知芯片在极端场景下效果并不理想,对于如驾驶场景中的突发危险、隧道口的剧烈光线变化和夜间强闪光干扰,常常会出现失真、失效或高延迟等问题。而“天眸芯”则能在极低的带宽(降低90%)和功耗下,实现每秒10000帧的高速、10bit的高精度、130dB的高动态范围视觉信息采集,有效应对这些挑战。
同时,该研究团队提出了一种基于视觉原语的互补双通路类脑视觉感知新范式,基于人类视觉系统的基本原理,将开放世界的视觉信息拆解为基于视觉原语的信息表示,并通过有机组合这些原语,模仿人视觉系统的特征,形成两条优势互补、信息完备的视觉感知通路。因此“天眸芯”所使用的新范式不仅突破了传统视觉感知的性能瓶颈,还能高效应对各种极端场景。
此外,团队基于“天眸芯”自主研发了高性能软件和算法,并在开放环境车载平台上进行了性能验证。在多种极端场景下,该系统实现了低延迟、高性能的实时感知推理,展现了其在智能无人系统领域的应用潜力。
“天眸芯”
据悉,这是清华大学类脑计算研究中心团队继“天机芯”(异构融合类脑计算)后,第二次登上《自然》杂志的封面,标志着中国在类脑计算和类脑感知两个重要方向上均取得了基础性突破,为人工通用智能的发展贡献了重要力量。