本报北京5月30日讯(记者 董鲁皖龙)清华大学类脑计算研究中心团队近日研制出了世界首款类脑互补视觉芯片“天眸芯”,基于该研究成果的论文《面向开放世界感知、具有互补通路的视觉芯片》作为封面文章,登上5月30日的国际知名学术期刊《自然》(Nature)。
在开放世界中,智能系统不仅要处理庞大的数据量,还需要应对各种极端事件。传统视觉感知芯片由于受到“功耗墙”和“带宽墙”的限制,在应对这些场景时往往面临失真、失效或高延迟的问题,严重影响了系统的稳定性和安全性。对此,清华大学类脑计算研究中心团队聚焦类脑视觉感知芯片技术,提出了一种基于视觉原语的互补双通路类脑视觉感知新范式。基于这一新范式,团队研制的“天眸芯”,在极低的带宽(降低90%)和功耗代价下,实现了每秒10000帧的高速、10bit的高精度、130dB的高动态范围的视觉信息采集。
团队相关负责人介绍,“天眸芯”不仅突破了传统视觉感知范式的性能瓶颈,而且能够高效应对各种极端场景,确保系统的稳定性和安全性。基于“天眸芯”,团队还自主研发了高性能软件和算法,并在开放环境车载平台上进行了性能验证。在多种极端场景下,该系统实现了低延迟、高性能的实时感知推理,展现了其在智能无人系统领域的巨大应用潜力。