腾讯程序员奇思妙想:升级人工耳蜗语音清晰度40%

为了让用户在使用会议时,听得真切清晰,腾讯研发了新一代实时音频技术——腾讯天籁AI技术,并成功把它嵌入在了腾讯会议里。

之后,团队成员突发奇想——在中国,有超过2780万人是听力障碍者。如果把这项技术用在人工耳蜗上,听障人士将获得更好的听觉体验。

去年9月,腾讯免费开放了腾讯天籁AI音频技术,让更多公益开发者、设备厂商、NGO及行业共享这项技术,一起帮助听障人群解决“听不清”难题。

一年过去,事情有了新进展。有了这项技术,人工耳蜗的语音清晰度、可懂度能够提升40%。

据了解,人工耳蜗是一种电子装置,可将声音转为电子信号,通过刺激听神经来恢复或重建聋人的听觉功能。

不过,人工耳蜗绕过了外耳和中耳,直接刺激内耳,使得人的生理降噪能力无法派上用场,降噪能力有限。这种感觉就像我们走进澡堂子时候的视觉体验——雾气弥漫,要费老大劲才能看清楚。

因此,降噪问题一直都是人工耳蜗生产厂家所面临的技术困境之一。

从去年初开始,围绕“如何让听障人士听得清楚”这个问题,腾讯找到了国内最大的人工耳蜗厂商之一——诺尔康,腾讯负责提供AI解决方案;诺尔康负责将这些技术装在自家产品上,并给出测试结果。

现在,天籁实验室与诺尔康联合推出的“人工耳蜗+手机伴侣”联合解决方案,能够使人工耳蜗的语音清晰度、可懂度提升40%。

一方面,方案让人工耳蜗使用者能够真实辨别环境“噪音”,获取“有效”声音;另一方面,方案将人工耳蜗与手机伴侣间的通信延迟缩减至150毫秒内,降低使用者的听觉延迟感,极大程度提升了听力体验。

此外,天籁实验室和全球头部人工耳蜗厂商美笛乐,开发了一款APP——美讯听宝。这款APP有听力测试、AI辅听、远程调机支持、远程康复服务四项功能。

测听功能不仅适用于戴上人工耳蜗或助听器的听障人士,你也可以推荐长辈使用,让他们关注自己的听力健康,及时发现问题。

“AI辅听”功能,采用了腾讯会议中的AI降噪、AI语音增强技术。看剧、听音乐时,把手机放在电视边上,并打开这项功能——能帮助听障人士听得更清晰,并感受到更优美的旋律。

主观实验结果显示,对于听障且未配戴助听设备的用户,提升单音节识别率约66%。