清华芯片在类脑视觉感知芯片领域取得重要突破
![](/skin/2018/images/text-message.png)
清华芯片在类脑视觉感知芯片领域取得重要突破
2024-05-30 19:10:00 评论: 字体大小 T T T 清华大学依托精密仪器系的清华类脑计算研究中心施路平教授团队,提出一种基于视觉原语的芯片芯片互补双通路类脑视觉感知新范式,研制出世界首款类脑互补视觉芯片“天眸芯”。类脑领域基于该研究成果的视觉论文《面向开放世界感知、具有互补通路的感知视觉芯片》作为封面文章,登上5月30日的重突《自然》杂志。世界首款!清华清华芯片取得重要突破
近日,芯片芯片清华大学在类脑视觉感知芯片领域取得重要突破:
清华大学依托精密仪器系的类脑领域类脑计算研究中心施路平教授团队,提出一种基于视觉原语的视觉互补双通路类脑视觉感知新范式,研制出世界首款类脑互补视觉芯片“天眸芯”。感知基于该研究成果的重突论文《面向开放世界感知、具有互补通路的清华视觉芯片》(A Vision Chip with Complementary Pathways for Open-world Sensing)作为封面文章,登上5月30日的芯片芯片《自然》杂志。
这是类脑领域该团队继异构融合类脑计算“天机芯”后第二次登上 《自然》 杂志封面,标志着在类脑计算和类脑感知两个方向上均取得重要突破。
5月30日《自然》杂志封面
这一成果与我们的日常生活有哪些关系?据介绍,随着人工智能的飞速发展,无人驾驶和具身智能等无人系统在现实社会中不断推广应用,其中,视觉感知作为获取信息的关键途径,发挥着至关重要的作用。然而,在复杂多变且不可预测的环境中,实现高效、精确且鲁棒的视觉感知依然是一个艰巨的挑战。
在开放世界中,智能系统不仅要处理庞大的数据量,还需要应对各种极端事件,如驾驶中的突发危险、隧道口的剧烈光线变化、夜间强闪光干扰等。传统视觉感知芯片由于受到“功耗墙”和“带宽墙”的限制,在应对这些场景时往往面临失真、失效或高延迟的问题,严重影响系统的稳定性和安全性。
为了克服这些挑战,清华大学精密仪器系类脑计算研究团队聚焦类脑视觉感知芯片技术,提出了一种基于视觉原语的互补双通路类脑视觉感知新范式。该范式借鉴了人类视觉系统的基本原理,将开放世界的视觉信息拆解为基于视觉原语的信息表示,并通过有机组合这些原语,模仿人视觉系统的特征,形成两条优势互补、信息完备的视觉感知通路。
基于这一新范式,团队进一步研制出了世界首款类脑互补视觉芯片“天眸芯”,在极低的带宽和功耗代价下,实现了每秒10000帧的高速、10bit的高精度、130dB的高动态范围的视觉信息采集,不仅突破了传统视觉感知范式的性能瓶颈,而且能够高效应对各种极端场景,确保系统的稳定性和安全性。
类脑互补视觉感知芯片“天眸芯”
基于“天眸芯”,团队还自主研发了高性能软件和算法,并在开放环境车载平台上进行了性能验证。在多种极端场景下,该系统实现了低延迟、高性能的实时感知推理,展现了其在智能无人系统领域的巨大应用潜力。
自动驾驶感知演示平台
据悉,论文通讯作者为清华大学精密仪器系施路平教授和赵蓉教授。研究团队表示,“天眸芯”的成功研制为自动驾驶、具身智能等重要应用开辟了新的道路。结合团队在类脑计算芯片“天机芯”、类脑软件工具链和类脑机器人等方面已应用落地的技术积累,“天眸芯”的加入将进一步完善类脑智能生态,有力推动人工通用智能的发展。
图为研究团队(张兆基摄)
相关文章
- 中新网11月19日电 针对近期的大范围雨雪天气,国家旅游局下发通知强调,要求各地指导A级景区做好强降雪防范应对工作,切实保障游客的安全。近日,受冷暖空气共同影响,华北地区及西北地区东部普降大到暴雪,河2024-06-28
《小資理財90秒【圖卡小劇場】》:財務自由的「25倍法則」,來自「4%安全提領率」研究
文:趙柏凱第六章 指數化投資存多少錢,才能財務自由?Tips ▶25倍法則今天是戒韭門診的日子,海莉提早到LOVE咖啡館吃晚餐。吃到一半,娜娜走進來。博士,我想要辭職去完成夢想,但史提夫反對。妳的夢想2024-06-28《每個人都能打造線上課!》:眾多追蹤、訂閱者當中僅約2%會下單,想推銷課程還能怎麼做?
文:露西・格里菲斯Lucy Griffiths)第七章 如何建立你的受眾一開始進入網路世界時,不確定有沒有人想聽我說些什麼,有一百人追蹤訂閱我的IG或YouTube似乎是很重要的時刻。擁有追蹤者和訂閱2024-06-285種幫長輩換衣的實用技巧:是否臥床、有無患側,穿脫衣順序都有所不同
台灣因少子化及高齡化,在2025年即將進入超高齡社會,也就是65歲以上人口佔比高達20%,在照護上若沒有專業知識,連幫長輩換件衣服都可能產生不適感,甚至受傷。以下我們一起看看,如何順利幫助長輩更衣,及2024-06-28- 你是否也曾這樣——和同事的爭執已經結束了,但你還是不斷重播那些針鋒相對的畫面;或者看了飛機失事的新聞之後,每每搭飛機前你都會焦慮大爆發,可怕的念頭不斷盤旋在腦中。有時候,面對一件負面事情,理解我們為何2024-06-28
《平衡心態》:身邊住的若都是薪水較高的人,可能會影響我們的健康
文:安德魯・哈藍Andrew Hallam)當高收入還是不夠高我們穿過中美洲之後往北開,最終到達美國。我們認識了一對住在加州波托拉谷Portola Valley)的夫妻暫且以約翰與凱西稱呼他們吧)。他2024-06-28
最新评论