其他行业 · AI应用
Be My Eyes变革视觉无障碍体验
Be My Eyes致力于解决视障及低视力人群的视觉无障碍挑战。通过利用GPT-4,组织开发了“虚拟志愿者”(Virtual Volunteer™),显著改善了用户的日常体验,使他们能够轻松识别物体并导航周围环境。在图像文本解释的测试中表现出前所未有的性能,用户因而可以自信地穿行如铁路系统等复杂环境。同时,该技术还简化了在线购物流程,让视障者能更便捷地消费。这一创新深刻促进了用户独立性和生活品质的提升,展示了AI在无障碍领域的巨大潜力。
图像文本解释性能
unparalleled performance to any image-to-text object recognition tool
来源披露
01
业务背景
Be My Eyes致力于解决视障及低视力人群的视觉无障碍挑战。通过利用GPT-4,组织开发了“虚拟志愿者”(Virtual Volunteer™),显著改善了用户的日常体验,使他们能够轻松识别物体并导航周围环境。在图像文本解释的测试中表现出前所未有的性能,用户因而可以自信地穿行如铁路系统等复杂环境。同时,该技术还简化了在线购物流程,让视障者能更便捷地消费。这一创新深刻促进了用户独立性和生活品质的提升,展示了AI在无障碍领域的巨大潜力。
02
遇到的问题
视障及低视力人群(超2.5亿人)在日常任务(如识别产品、导航机场、阅读网页与电商页面)中缺乏视觉能力,传统图像识别无法对话理解上下文,屏幕阅读器处理图片和杂乱页面极其繁琐。
03
AI 解决方案
Be My Eyes利用GPT-4视觉输入能力,在App内开发Virtual Volunteer™:用户发送图像,GPT-4识别并对话分析(如识别冰箱食材并推荐食谱、导航铁路系统、总结网页与电商搜索结果以辅助购物),支持重新提示获取即时信息。
- 12012年起Be My Eyes连接视障者与志愿者
- 2获得GPT-4研究预览权限后开始开发Virtual Volunteer™
- 32023年2月初小范围员工beta测试
- 4数周内向用户推出该功能
04
实施结果
图像文本解释性能:unparalleled performance to any image-to-text object recognition tool(前所未有地优于任何现有工具)
05
风险与边界
未披露
““In the short time we’ve had access, we have seen unparalleled performance to any image-to-text object recognition tool out there. The implications for global accessibility are profound.””
Michael Buckley · CEO of Be My Eyes
信息来源
1 个来源页面内容为结构化改写;关键结论应可追溯到以下材料。