清华大学类脑计算研究中心团队近日研制出了世界首款类脑互补视觉芯片「天眸芯」,为自动驾驶、具身智慧等重要应用开辟了新的道路,也将能够进一步完善类脑智慧生态,有力推动人工通用智慧的发展,相关成果5月30日作为封面文章,发表于国际学术期刊《自然》。
论文通信作者、清华大学精密仪器系教授施路平说明,在开放世界中,智慧系统不仅要应对庞大的数据量,还需要应对如驾驶场景中的突发危险、隧道口的剧烈光线变化和夜间强闪光干扰等极端事件。传统视觉感知芯片面对此类场景往往出现失真、失效或高延迟,限制系统的稳定性和安全性。
据新华社报导,为更好应对上述问题,清华大学类脑计算研究中心团队聚焦类脑视觉感知芯片技术,提出了一种基于视觉原语的互补双渠道类脑视觉感知新范式。
施路平说,该范式借鉴了人类视觉系统的基本原理,将开放世界的视觉信息拆解为基于视觉原语的信息表示,并通过有机组合这些原语,模仿人视觉系统的特征,形成两条优势互补、信息完备的视觉感知渠道。
基于这一新范式,团队进一步研制出了世界首款类脑互补视觉芯片「天眸芯」,实现高速、高精度、高动态范围的视觉信息采集,能够高效应对各种极端场景,确保系统的稳定与安全性。同时,基于「天眸芯」,团队还自主研发了高性能软件和算法,并在开放环境车载平台上进行了性能验证。
论文通信作者、清华大学精密仪器系教授赵蓉表示,「天眸芯」为自动驾驶、具身智慧等重要应用开辟了新的道路。结合团队在类脑计算芯片「天机芯」、类脑软件工具链和类脑机器人方面的应用落地的技术积累,「天眸芯」的加入将能够进一步完善类脑智慧生态,有力推动人工通用智慧的发展。