电子导盲犬可能要来了!相关研究在我国取得新突破
“啪嗒啪嗒......”一只机器狗在街上迈着规律的电导得新步伐,拉着牵引绳的盲犬盲人,在它的相关带领下越过沿路障碍,平稳地行走着,研究电子导盲犬能否取代传统导盲犬,突破解决视障人士一犬难求的电导得新困境?西工大团队在这方面开展研究攻关并取得了新的突破。
近日,盲犬西北工业大学光电与智能研究院联合中国电信人工智能研究院在探索离线具身智能应用方面取得阶段性进展。相关具身智能,研究即具有物理实体,突破能够通过传感器和执行器与环境进行实时互动,电导得新执行相应指令或进行决策的盲犬智能机器。
李学龙教授团队将机器狗搭载离线大模型,相关应用在智能导盲场景,研究开发出大模型离线具身智能导盲犬,突破并实现了其智能人机交互、智能乘梯引导、智能过街引导、智能室内引导等功能。
该成果进一步展示了使用离线具身智能导盲犬代替传统导盲犬的可能性,同时验证了离线具身智能范式的可行性,使大模型具身智能机器人可以脱离互联网环境,应用在无网或网络信号不佳的工况环境,进一步拓展了临地安防的应用场景。
近年来,随着机器人技术和SLAM导航技术的快速发展,针对电子导盲犬的探索也层出不穷。然而受制于自然语言处理技术的限制,上一代电子导盲犬仍然欠缺和人类“自由对话”的能力,也难以为视障人士提供情感陪伴。
大模型及具身智能技术的出现使电子导盲犬实现这种高级能力成为可能。但机器狗的低算力计算平台难以支撑大模型运行所需的海量计算资源,通常只能通过请求云服务的“在线具身智能”范式获得大模型的高级能力,这严重限制了电子导盲犬的场景应用范围。
电子导盲犬
为此,李学龙教授团队结合目前最新的大模型量化压缩和加速推理技术,成功将大模型部署至机器狗的低算力计算平台,验证了“离线具身智能”范式的可行性。
目前通过实验,团队开发的离线具身智能导盲犬已能够与视障人士流畅沟通指令,并带领其通过马路、楼梯、电梯等多样复杂环境,验证了离线具身智能导盲犬的智能人机交互能力、电梯弱网络环境下的智能乘梯引导能力、实时性要求较高的智能过街引导能力和智能室内引导能力等。
离线具身智能导盲犬指引视障人士进电梯
离线具身智能导盲犬指引视障人士过马路
该成果证明了离线具身智能导盲犬代替传统导盲犬的可能性,同时验证了离线具身智能范式的可行性,使大模型具身智能机器人可以脱离互联网,应用在无网或网络信号不佳的工况环境,提供更加实时的智能响应以及更好的人机交互体验。
未来,团队将进一步优化具身智能导盲犬技术方案,与电信星辰大模型相结合,探索在线与离线相融合的分布式异构具身智能方案,进一步拓宽离线具身智能导盲犬及更多智能机器人平台的应用场景,有效赋能工业生产智能化,加快形成新质生产力。
相关文章
- 美國佛州上演浪漫的求婚記,男子想模仿電影《鐵達尼號》的經典橋段,帶著女友站到船頭、展開雙臂,然後開口求婚,沒想到過程大出包,掏口袋的瞬間,手沒抓好,戒指盒直接掉進了海中,男子也瞬間化身地表最強求婚男,2024-05-16
- 端午節即將到來,雲林西螺鎮農會推出的黃金米粽超級搶手,開放預購才一個小時就賣出7萬多顆,不過原物料上漲,店家實在撐不住,不得不調漲,原本一顆28元,漲到35元;林內農會推出的金旺來五穀包粽,裡面包入特2024-05-16
- 来源:中科院网站 发布时间:2017/9/5 9:38:372024-05-16
- 随着社会生活水平的提高,人们对健康生活提出了更高的要求,闲暇时打打球、散散步已成为人们日常必不可少的生活习惯。健身设施随处可见,健身路径遍布城乡,各种全民健身广场、场馆和健身公园更是为群众提供了健身的2024-05-16
跟着总书记学党史·精神印记 弘扬塞罕坝精神,持之以恒推进生态文明建设
2024-05-16- 昨晚,北京国安队在2024赛季中超联赛第四轮比赛中坐镇主场对阵上赛季冠军上海海港队。在现场53898名球迷的助威声中,京沪两队2比2战平。国安队前三轮拿到2胜1平、一球未失的战绩,本场面对上赛季冠军、2024-05-16
最新评论