新突破！世界首款类脑互补视觉芯片“天眸芯”

半导体技术天地 · 公众号 · · 2024-05-30 18:35

正文

半导体技术天地 振兴国产半导体产业！

5月30日消息，清华大学类脑计算研究中心团队近日研制出了 世界首款类脑互补视觉芯片“天眸芯” ，相关成果5月30日作为封面文章，发表于国际学术期刊《自然》。这是该团队继异构融合类脑计算“天机芯”后，第二次登上《自然》封面，标志着在类脑计算和类脑感知两个方向上均取得了基础性突破。

论文通讯作者、清华大学精密仪器系教授施路平介绍，在开放世界中，智能系统不仅要应对庞大的数据量，还需要应对如驾驶场景中的突发危险、隧道口的剧烈光线变化和夜间强闪光干扰等极端事件。而传统视觉感知芯片面对此类场景往往出现失真、失效或高延迟，限制系统的稳定性和安全性。

为更好应对上述问题，清华大学类脑计算研究中心团队聚焦类脑视觉感知芯片技术，提出了一种基于视觉原语的互补双通路类脑视觉感知新范式。

“该范式借鉴了人类视觉系统的基本原理，将开放世界的视觉信息拆解为基于视觉原语的信息表示，并通过有机组合这些原语，模仿人视觉系统的特征，形成两条优势互补、信息完备的视觉感知通路。”施路平说。

基于这一新范式，团队进一步研制出了世界首款类脑互补视觉芯片“天眸芯”。

天眸芯在极低的带宽（降低90%）和功耗代价下，实现了每秒10000帧的高速、10bit的高精度、130dB的高动态范围的视觉信息采集。这些特性使得天眸芯能够高效应对各种极端场景，确保系统的稳定性和安全性。

天眸芯在智能无人系统领域的应用案例主要集中在开放环境车载平台上。清华大学研制的天眸芯具备高性能的实时感知推理能力，并且在多种极端场景下展现出低延迟、高性能的特点。

具体来说，基于天眸芯，团队自主研发了高性能软件和算法，并在开放环境车载平台上进行了性能验证。在这些验证中，系统能够实现低延迟、高性能的实时感知推理，这表明天眸芯在处理复杂视觉任务时具有显著优势。

“天眸芯”的成功研制无疑是智能感知芯片领域的一个重大突破。它不仅为智能革命的发展提供了一个强大的技术支持，还为自动驾驶、具身智能等重要应用开辟了新的道路。结合团队在类脑计算芯片“天机芯”、类脑软件工具链和类脑机器人等方面已应用落地的技术积累，“天眸芯”的加入将进一步完善类脑智能生态，有力地推动人工通用智能的发展。

*免责声明：以上内容整理自网络，不代表小编的观点和立场，仅供交流学习之用。如有任何疑问或异议，请留言与我们联系。

- END -