西工大团队开发出离线具身智能导盲犬

首页 > 教育新闻 > 教育新闻阅读/2024-03-30 / 加入收藏 / 阅读 [打印]

    本报讯(记者 冯丽)电子导盲犬能否取代传统导盲犬,解决视障人士一犬难求的困境?西北工业大学团队在此方面开展研究攻关并取得了新的突破。目前,团队开发的离线具身智能导盲犬已能够与视障人士流畅沟通指令,并带领其通过马路、楼梯、电梯等多样复杂环境。

    近日,西工大光电与智能研究院联合中国电信人工智能研究院,在探索离线具身智能应用方面取得阶段性进展。具身智能,即具有物理实体,能够通过传感器和执行器与环境进行实时互动,执行相应指令或进行决策的智能机器。

    西工大教授李学龙带领团队将搭载离线大模型的机器狗应用在智能导盲场景,开发出大模型离线具身智能导盲犬,并实现了智能人机交互、智能乘梯引导、智能过街引导、智能室内引导等功能。该成果进一步展示了使用离线具身智能导盲犬代替传统导盲犬的可能性,同时验证了离线具身智能范式的可行性,使大模型具身智能机器人可以脱离互联网环境,应用在无网或网络信号不佳的工况环境,进一步拓展临地安防的应用场景。

    受制于自然语言处理技术,上一代电子导盲犬欠缺和人类“自由对话”的能力。大模型及具身智能技术的出现,使电子导盲犬实现这种高级能力成为可能。但机器狗的低算力计算平台难以支撑大模型运行所需的海量计算资源,通常只能通过请求云服务的“在线具身智能”范式获得大模型的高级能力,这严重限制了电子导盲犬的场景应用范围。李学龙团队结合目前最新的大模型量化压缩和加速推理技术,成功将大模型部署至机器狗的低算力计算平台。

  • 最新内容
  • 相关内容
  • 网友推荐
  • 图文推荐