Notebookcheck Logo

新加坡大学研究人员展示最新的 AiSee 耳机原型,通过人工智能语音描述让盲人看清世界

AiSee 耳机通过人工智能图像识别技术向视力不佳的佩戴者描述物体。(资料来源:新加坡国立大学 AHL)
AiSee 耳机通过人工智能图像识别技术向视力不佳的佩戴者描述物体。(资料来源:新加坡国立大学 AHL)
新加坡国立大学的研究人员展示了他们为盲人设计的 AiSee 耳机的最新原型。这款耳机最初是奥克兰大学的一个项目,它利用摄像头、骨传导扬声器和人工智能对物体进行描述,为有视力障碍的佩戴者提供帮助。
Wearable AI

新加坡国立大学增强人类实验室的研究人员展示了最新的盲人 AiSee 耳机原型。这款人工智能耳机最初是奥克兰大学2018年的一个项目,它利用摄像头识别物体,然后为有视力障碍的佩戴者提供语音描述。

盲人和低视力者经常会遇到弄清眼前事物的问题。由于标签和罐头的手感完全相同,区分不同的汤罐就成了一个难题。智能手机图像搜索可以提供帮助,但这种方法需要智能手机、数据连接和一只空闲的手。

AiSee 只需轻触左耳按钮即可操作。一个 1300 万像素的摄像头捕捉物体图像,供人工智能系统识别,然后通过骨传导扬声器向佩戴者讲述物体描述,即使在嘈杂的户外空间也能听到。这些扬声器也不会阻挡重要的环境声音。耳机由 1200 毫安可充电电池供电。

AiSee 仍在开发之中,以进一步改进该设备。同时,年纪大了有老花眼的读者可以试试一副漂亮的可调节放大镜(如亚马逊上的这款),帮助他们进行十字绣。

2024 年 2 月 5 日

新加坡国立大学研究人员开发出人工智能 "眼睛",让视障人士 "看见 "物体
苏兰加-纳纳亚卡拉副教授(左)与新加坡国立大学学生马克-迈尔斯(右)在一起,马克-迈尔斯作为视障用户测试了AiSee。

购买日用品对我们许多人来说是一项常见的活动,但对于视障人士来说,识别日用品可能是一项艰巨的任务。来自新加坡国立大学计算机学院的研究团队(新加坡国立大学计算机学院(NUS Computing)的一个研究小组推出了一款经济实惠的可穿戴辅助设备 AiSee,它可以在人工智能(AI)的帮助下帮助视障人士 "看清 "周围的物体。
视障人士每天都面临着各种障碍,尤其是在识别物体方面,这对于简单和复杂的决策都至关重要。虽然人工智能领域的突破极大地提高了视觉识别能力,但这些先进技术在现实世界中的应用仍然充满挑战且容易出错。

AiSee 于 2018 年首次开发,历时五年逐步升级,旨在利用最先进的人工智能技术克服这些限制。


"通过 AiSee,我们的目标是让用户能够进行更自然的交互。通过遵循以人为本的设计流程,我们发现有理由质疑使用摄像头增强眼镜的典型方法。视力障碍者可能不愿意戴眼镜,以免被人耻笑。AiSee 项目的首席研究员、新加坡国立大学计算机学院信息系统与分析系副教授苏兰加-纳纳亚卡拉(Suranga Nanayakkara)说:"因此,我们提出了一种替代硬件,其中包含一个隐蔽的骨传导耳机。

用户只需拿着一个物体,然后启动内置摄像头,就能捕捉到物体的图像。在人工智能的帮助下,AiSee 会识别物体,并在用户查询时提供更多信息。

AiSee 如何工作?

AiSee 由三个关键部分组成:

(1) 眼睛:视觉引擎计算机软件
AiSee 包含一个微型摄像头,可捕捉用户的视野。这构成了 AiSee 的软件组件,也称为 "视觉引擎计算机"。该软件能够从捕捉到的图像中提取文字、标识和标签等特征进行处理。

(2) 大脑:由人工智能驱动的图像处理装置和互动问答系统
用户拍摄感兴趣物体的照片后,AiSee 会利用复杂的云端人工智能算法来处理和分析所拍摄的图像,从而识别物体。用户还可以提出一系列问题,以了解有关该物体的更多信息。


AiSee 采用先进的文本到语音和语音到文本识别与处理技术来识别物体并理解用户的询问。在大型语言模型的支持下,AiSee 在互动式问答交流中表现出色,使系统能够准确理解用户的询问,并以迅速、翔实的方式做出回应。

与大多数需要与智能手机配对的可穿戴辅助设备相比,AiSee 是一个独立的系统,无需任何额外设备即可独立运行。

(3) 扬声器:骨传导声音系统
AiSee 的耳机采用了骨传导技术,可通过头骨的骨骼进行声音传输。这可以确保视障人士在有效接收听觉信息的同时,还能听到对话或交通噪音等外部声音。这对于视障人士来说尤为重要,因为环境声音为决策提供了重要信息,尤其是在涉及安全因素的情况下。

"目前,新加坡的视障人士还无法获得如此先进的人工智能辅助技术。因此,我们相信,AiSee 有潜力增强视障人士的能力,使他们能够独立完成目前需要协助才能完成的任务。我们下一步的目标是使 AiSee 价格合理,并能为大众所接受。为了实现这一目标,我们正在进行进一步的改进,包括更符合人体工程学的设计和更快的处理单元,"Nanayakkara 副教授解释道。
新加坡国立大学学生马克-迈尔斯(Mark Myres)以视障用户的身份帮助测试了AiSee,他评论说:"很多时候,辅助设备似乎非常针对完全失明的人或视障人士。我认为 AiSee 是一个很好的平衡。视障人士和盲人都能从中受益匪浅。

用户测试和进一步改进

Nanayakkara 副教授和他的团队目前正在与新加坡的 SG Enable 公司进行讨论,以便对视障人士进行用户测试。测试结果将有助于完善和改进 AiSee 的功能和性能。此外,B.P. De Silva 控股私人有限公司慷慨捐赠了 15 万新元,用于支持该项目。

BPH 决定为 AiSee 的发展做出贡献,这源于其对企业社会责任的承诺,以及希望通过促进包容性和无障碍环境这一更广泛使命对社会产生积极影响的真诚愿望。该公司的慈善事业也反映了其对技术变革力量的信念,以应对社会挑战,创造一个更加公平和包容的世界。

SG Enable 首席执行官 Ku Geok Boon 女士说:"辅助技术带来的创新解决方案可以改变残疾人的生活,无论是支持他们更加独立地生活,还是减少就业障碍。作为新加坡残疾与融合领域的协调机构和行业推动者,SG Enable很高兴能与新加坡国立大学和B.P. De Silva控股私人有限公司等合作伙伴合作,利用技术增强残疾人的能力。

除该项目外,SG Enable 还寻求与新加坡国立大学合作,探索人工智能、人机界面和辅助技术如何为残疾人提供更多的技术选择。

Please share our article, every link counts!
> Notebookcheck中文版(NBC中国) > 新闻 > 新闻档案 > 新闻档案 2024 02 > 新加坡大学研究人员展示最新的 AiSee 耳机原型,通过人工智能语音描述让盲人看清世界
David Chien, 2024-02- 8 (Update: 2024-02- 8)