Nature头条:上海交大顾磊磊团队开发AI眼镜,帮助盲人导航
《做最好的自己》- 丁磊:个人成长与领导力的启示 #生活技巧# #领导力技巧# #自我提升的书籍#
撰文丨王聪
编辑丨王多鱼
排版丨水成文
对于盲人和部分视力障碍者来说,可穿戴电子视觉辅助系统是医学治疗和植入假体的一个颇有前景的替代选择。这些装置能将来自环境的视觉信息转换成其他感官信号来辅助日常任务。不过,当前系统很难使用,所以无法大规模推广。
2025 年 4 月 14 日,上海交通大学电子信息与电气工程学院清源研究院、上海人工智能实验室顾磊磊团队在 Nature 子刊 Nature Machine Intelligence 上发表了题为:Human-centred design and fabrication of a wearable multimodal visual assistance system 的研究论文,还研究登上了今天的 Nature 头条。
该研究开发了一款面向盲人和部分视力障碍者的可穿戴多模态视觉辅助系统,该系统利用人工智能(AI)解读安装在眼镜上的摄像头所拍摄的画面以勘测周围环境,在佩戴者接近障碍物或物体时会通过骨传导耳机进行语音提示,以及通过贴在手腕的可伸展“人造皮肤”进行震动提醒,指导佩戴者移动方向,避开两侧的物体,为其选择一条无障碍路线。
该研究提出了一种以人为本的多模态可穿戴系统,通过融合软件和硬件创新来提高可用性。该系统本质上是一副配有摄像头的智能眼镜,可以捕捉佩戴者周围环境的实时图像,该系统还通过一台微型计算机使用经过训练的机器学习算法来处理这些图像,从而检测周围环境中其他人以及门、墙和家具等物体的存在。该系统每 250 毫秒就会向用户提供关于周围环境的音频提示,并在左侧或右侧耳机上发出“哔哔”声,引导用户朝正确的方向前进。
研究团队还开发了一种灵活的可伸展“人造皮肤”贴片,可以贴在手腕和手指上,用于额外的导航辅助,其配备了自己的摄像头系统,当障碍物在 40 厘米到 5 厘米之间时,会震动提醒佩戴者。当用户伸手去拿东西时,它们也会震动,提醒他们何时该抓东西了。
该设备通过自供电的摩擦起电智能鞋垫将真实用户与虚拟化身对齐,在精心设计的场景中支持有效的 VR 训练。
为了验证该系统的效果,研究团队招募了 20 名盲人或部分视力障碍者进行测试,在室内迷宫测试中,12 名参与者能够在室内迷宫中避开障碍物。在真实世界测试中,8 名参与者能够在城市街道上行走以及穿过摆满家具的会议室。
这些研究结果表明,整合视觉、听觉和触觉能增强视力辅助系统的可用性和功能性,为用户友好型视觉辅助系统铺平了道路,为改善视力障碍人士的生活质量提供了新的途径。
论文通讯作者、上海交通大学人工智能研究员顾磊磊表示,这个系统可以部分取代眼睛。目前,这个装置还只是一个原型机,为了使它在实际层面上更有用,研究团队需要确保它非常可靠,并且对用户是安全的。
论文链接:
https://www.nature.com/articles/s42256-025-01018-6
设置星标,不错过精彩推文
阅读原文
网址:Nature头条:上海交大顾磊磊团队开发AI眼镜,帮助盲人导航 https://www.yuejiaxmz.com/news/view/1263589
相关内容
上海交大开发“盲人 AI 导航眼镜”中国团队研发出服务盲人导航的可穿戴AI辅助系统
上海交通大学智能传感新硬件:用可穿戴AI系统为盲人导航
上海交大教授为视障人士研发了可穿戴AI导航系统
科技助力无障碍生活,上海交大推出智能导航眼镜!
中国研发出盲人导航可穿戴AI系统!| 博览日报
上海交大高峰教授团队“导盲机器人”助力改善我国视障人士生活
X玖少年团赵磊结婚,完成舞台到厨房蜕变,谱写偶像的烟火情书!
杭产AI眼镜:视障人士的智能助手,能导航还能挑衣服!
上海交大研发可穿戴AI系统 助力盲人无障碍出行