应用

技术

物联网世界 >> 物联网新闻 >> 物联网热点新闻
企业注册个人注册登录

腾讯:央视频 AI 手语翻译官聆语由公司技术团队打造

2022-02-08 11:13 IT之家

导读:据介绍,聆语、小聪背后,整合了 3D 数字人建模、语音识别、语义理解、机器翻译和图像渲染技术等。

近日,腾讯发文表示,在央视频的比赛播放中,央视频 AI 手语翻译官聆语为武大靖夺金时刻带来了手语解说。此外,腾讯 3D 手语数字人小聪也将上线腾讯体育。

6c4c2075-d0a6-464f-8c60-4a57a0e57dcd.jpg

▲ AI 手语翻译官聆语

据了解,腾讯表示,小聪、聆语,均由腾讯的技术团队打造,特点是:手语表达能力接近真人;能自行学习,快速补充海量新词、热词。近期,聆语、小聪会为冰雪赛事的转播采访等环节,提供手语解说服务。

据介绍,聆语、小聪背后,整合了 3D 数字人建模、语音识别、语义理解、机器翻译和图像渲染技术等。

腾讯开发出了一套手语翻译系统,只需输入健听人语言,即可通过机器翻译低延迟生成高准确率的手语语言表征,比如:输入“他是我的手语老师”,预处理为“他 是 我 的 手语 老师”,翻译为“他 我 手语 老师 是”。

接着,驱动手语数字人准确表达,基于腾讯多模态端到端生成模型,进行联合建模及预测生成高准确率的动作、表情、唇动等序列,实现自然专业、易懂度高的手语效果。通过这项技术,AI 手语可懂度达 90% 以上。