清华(hua)大学类脑计(ji)算研究中心(xin)团队近日研制出了世界(jie)首款类脑互补视觉芯片“天眸芯”,相(xiang)关成果30日作为封面(mian)文(wen)章,发表于国际学术期刊《自然》。
论文(wen)通讯作者、清华(hua)大学精密仪器系教授施路(lu)平介绍,在开放世界(jie)中,智能(neng)系统不(bu)仅要应对庞大的数据量,还需要应对如驾驶场景中的突发危险(xian)、隧道口的剧烈(lie)光(guang)线变化和夜间强闪光(guang)干扰等极端事件。而传(chuan)统视觉感知芯片面(mian)对此类场景往往出现失真、失效或高延迟,限制系统的稳定性和安全性。
为更好应对上述问(wen)题,清华(hua)大学类脑计(ji)算研究中心(xin)团队聚焦类脑视觉感知芯片技术,提出了一种基于视觉原语的互补双通路(lu)类脑视觉感知新(xin)范式。
“该范式借鉴了人类视觉系统的基本原理,将开放世界(jie)的视觉信息拆解为基于视觉原语的信息表示,并通过有机组合这些原语,模仿人视觉系统的特征,形成两条优势互补、信息完备的视觉感知通路(lu)。”施路(lu)平说。
基于这一新(xin)范式,团队进一步研制出了世界(jie)首款类脑互补视觉芯片“天眸芯”,在极低的带宽(kuan)和功耗代(dai)价下,实现了高速、高精度、高动态范围的视觉信息采集,能(neng)够高效应对各种极端场景,确保系统的稳定性和安全性。
同时,基于“天眸芯”,团队还自主研发了高性能(neng)软件和算法,并在开放环境车载平台上进行了性能(neng)验证。在多种极端场景下,该系统实现了低延迟、高性能(neng)的实时感知推理,展现了其在智能(neng)无人系统领(ling)域的应用潜力。
论文(wen)通讯作者、清华(hua)大学精密仪器系教授赵(zhao)蓉表示,“天眸芯”为自动驾驶、具身智能(neng)等重要应用开辟了新(xin)的道路(lu)。结合团队在类脑计(ji)算芯片“天机芯”、类脑软件工具链和类脑机器人方面(mian)的应用落地的技术积累,“天眸芯”的加入将能(neng)够进一步完善类脑智能(neng)生(sheng)态,有力推动人工通用智能(neng)的发展。
据介绍,这是该团队继异构(gou)融合类脑计(ji)算“天机芯”后(hou),第二次登上《自然》封面(mian),标(biao)志着在类脑计(ji)算和类脑感知两个方向上均取得了基础性突破(po)。
(新(xin)华(hua)社)