来源:新华社
清华大学类脑计(ji)算研究中心团队近日研制出(chu)了世界首款类脑互(hu)补视觉芯片(pian)“天眸芯”,相关成(cheng)果5月30日作为封面文章(zhang),发表(biao)于国际学术期刊(kan)《自然》。
图(tu)为“天眸芯”。(清华大学精密仪器(qi)系供图(tu))
论文通讯作者、清华大学精密仪器(qi)系教授施路平介绍,在开放世界中,智能系统不仅要应对庞(pang)大的(de)数据量,还需(xu)要应对如驾驶场景中的(de)突发危险、隧(sui)道口的(de)剧烈光(guang)线变化和夜间(jian)强闪光(guang)干扰等极(ji)端事件。而传统视觉感知芯片(pian)面对此类场景往往出(chu)现失真、失效或(huo)高(gao)延迟,限制系统的(de)稳定(ding)性和安(an)全性。
为更好应对上述问题,清华大学类脑计(ji)算研究中心团队聚(ju)焦类脑视觉感知芯片(pian)技术,提出(chu)了一种基于视觉原语的(de)互(hu)补双(shuang)通路类脑视觉感知新范式。
“该范式借鉴了人类视觉系统的(de)基本原理,将开放世界的(de)视觉信息拆解为基于视觉原语的(de)信息表(biao)示,并通过有机组合(he)这些原语,模仿(fang)人视觉系统的(de)特征,形成(cheng)两条优势(shi)互(hu)补、信息完备的(de)视觉感知通路。”施路平说(shuo)。
基于这一新范式,团队进一步研制出(chu)了世界首款类脑互(hu)补视觉芯片(pian)“天眸芯”,在极(ji)低的(de)带宽和功耗代价下,实现了高(gao)速(su)、高(gao)精度、高(gao)动态范围的(de)视觉信息采集,能够(gou)高(gao)效应对各种极(ji)端场景,确保系统的(de)稳定(ding)性和安(an)全性。
同时,基于“天眸芯”,团队还自主研发了高(gao)性能软件和算法,并在开放环境车载平台上进行了性能验证。在多种极(ji)端场景下,该系统实现了低延迟、高(gao)性能的(de)实时感知推理,展现了其在智能无(wu)人系统领域的(de)应用潜力。
论文通讯作者、清华大学精密仪器(qi)系教授赵蓉表(biao)示,“天眸芯”为自动驾驶、具身智能等重要应用开辟了新的(de)道路。结合(he)团队在类脑计(ji)算芯片(pian)“天机芯”、类脑软件工具链(lian)和类脑机器(qi)人方面的(de)应用落地的(de)技术积累,“天眸芯”的(de)加入(ru)将能够(gou)进一步完善(shan)类脑智能生态,有力推动人工通用智能的(de)发展。
据介绍,这是该团队继异构融合(he)类脑计(ji)算“天机芯”后,第二次登上《自然》封面,标志着在类脑计(ji)算和类脑感知两个方向上均取得了基础性突破。
责编:叶舒筠
校对:陶谦