5月30日传来消息，清华大学的一个由施路平教授领导的类脑计算研究中心团队，来自该校的精密仪器系，成功地提出了一种创新的视觉感知方法——基于视觉原语的互补双通路类脑视觉感知新范式。根据这一创新理念，他们研发出了全球首款名为“天眸芯”的类脑互补视觉芯片。这款芯片以其高速、高精度和高动态范围的特点，显著提升了视觉信息采集的效能，并且突破了传统视觉感知芯片在稳定性和安全性等方面的性能限制。
昨日，这项成果以《面向开放世界感知的类脑互补视觉芯片》 为题作为封面文章发表于顶级学术期刊《自然》上（IT之家附 DOI:10.1038/s41586-024-07358-4）。
官方表示，传统视觉感知芯片受“功耗墙”和“带宽墙”的限制，在应对突发意外场景时往往面临失真、失效或高延迟等问题，严重影响了系统的稳定性和安全性。
为了克服这些挑战，清华大学精密仪器系类脑计算研究团队提出了一种基于视觉原语的互补双通路类脑视觉感知新范式。该范式借鉴了人类视觉系统的基本原理，将开放世界的视觉信息拆解为基于视觉原语的信息表示，并通过有机组合这些原语，模仿人视觉系统的特征，形成两条优势互补、信息完备的视觉感知通路。
基于这一新范式，团队进一步研制出了世界首款类脑互补视觉芯片“天眸芯”，在极低的带宽（降低 90%）和功耗代价下，实现了每秒 10000 帧的高速、10bit 的高精度、130dB 的高动态范围的视觉信息采集。
基于“天眸芯”，团队还自主研发了高性能软件和算法，并在开放环境车载平台上进行了性能验证。在多种极端场景下，该系统实现了低延迟、高性能的实时感知推理，展现了其在智能无人系统领域的应用潜力。
值得一提的是，这是该团队继异构融合类脑计算“天机芯”后，第二次登上《自然》封面，标志着我国在类脑计算和类脑感知两个重要方向上均取得了基础性突破。
广告声明：文内含有的对外跳转链接（包括不限于超链接、二维码、口令等形式），用于传递更多信息，节省甄选时间，结果仅供参考，IT之家所有文章均包含本声明。
