深圳智音无碍科技创始人凌志鹏在现场对产品功能进行了展示与讲解:“我从小右耳听力障碍,因此深知这个人群目前面临的困难,在全球范围内,有 4.7 亿听障人士面临着有障碍的沟通问题,而在中国,这一数据达到了 2780 万。我们的产品具有两个核心功能,一是手语识别技术,当聋哑人做手语的时候,该眼镜的摄像头可以扫描到指定区域的手语动态,并将手语翻译成声音,播放出来;同时,我现在讲的话也可以在眼镜上进行实时显示,帮助产品使用者理解。”
知音项目的最终解决方案是采用 AI、AR 等技术通过软硬件搭建一个面向听障人士的智能交流平台。这个平台的产品包括语音识别合成、声音场景识别以及 AR 智能眼镜等。产品不仅支持手语手势识别,还引入了实时视频手语客服功能,用以解决双向多轮复杂场景下的沟通问题。
知音 AR 智能眼镜集成了手语翻译引擎、声音转换系统、图像识别技术三大核心功能,全力实现让手语“被听见”,让声音“可看见”。开发集成 AI 技术的手语翻译应用程序,实时将手语转换为语音或文字,使健听人与听障人士之间的交流更加顺畅;同时利用语音合成技术,将口语转换为可视化文字,帮助听障人士理解他人发言,支持生活场景定制词汇,提高沟通效率。
在技术公益二期项目周期内,升级智能交流平台“知音圈”小程序,截至 2024 年 7 月,已吸引了超过 7000 名用户,累计使用频次超过 1000 次。同时在技术层面,完成了正/反向手语识别开发,在 AI 技术的加持下,完成千套以上达模型 AI 算法,并建立了新的手语 AI 是被算法数据可,手语识别准确率提升 60%,达到 95%,助力听障人士实现真正的无障碍交流。