北京冬奥期间,中国移动咪咕公司智能双语字幕实现在体育直播场景的行业首创商用,被用户誉为“最暖心的观赛功能”;卡塔尔世界杯期间,智能字幕全新升级,实现世界杯直播场景智能字幕与数智手语主播实时联动的首次应用突破,让“无碍”更有爱。
随着第31届大运会拉开帷幕,继日前咪咕在女足世界杯开赛后实现业界首创的闽南语直播智能字幕商用后,为让更多人群感受特色方言魅力,助力跨地域文化交流,实现跨语言无障碍理解,咪咕智能字幕再次推出行业首创的粤语直播智能字幕,持续提升无障碍观赛温度,打造暖心观赛体验,助力方言文化理解与传播。
此次大运会,智能字幕持续创新特色功能,以全新粤语方言视角带领观众跨语言无障碍畅享精彩赛事,在原普通话解说字幕的基础上,行业率先升级为支持特色方言解说的智能字幕,再一次引领智能字幕无障碍观赛技术。通过大运会等垂直场景方言语音识别模型优化、大模型方言翻译及规整等技术,粤语特色方言字幕准确率超92%,达行业领先水平。
1、方言声学与语言学模型垂类优化
在垂直场景模型训练方面,充分利用咪咕体育内容媒资优势,采用300小时左右的粤语解说赛事数据进行声学模型垂类训练优化,使模型能够更好地理解体育场景粤语发音特点。依托中国移动九天人工智能平台,针对大运会相关运动员、国家队等粤语术语名词进行语言学智能纠错训练优化,在短时间内明显提升方言字幕转写的准确率,为用户提供更加精准的字幕转写服务。
2、基于大模型的方言翻译规整
基于大模型,通过业务prompt垂直场景定制,实现方言字幕的翻译与规整。为让更多人群无障碍理解粤语,需要将粤语与简体中文进行转换。智能字幕依托大模型强大的学习和推理能力,快速捕捉粤语与普通话表达之间的细微差异,通过大模型对转写后的粤语字幕进行普通话简体中文的语义转换、以及语义规整,最终确保字幕呈现的准确性和通顺性,提升方言字幕的可理解度,扩大受众群体。
3、基于翻译记忆库的多语言翻译能力提升
为让更多的用户感知无障碍观赛能力,咪咕智能字幕支持中英双语字幕能力。自研翻译记忆库,针对普通话-英语、粤语-英语进行多语言翻译准确率提升。基于大体育知识图谱同一实体的多语言翻译,进行垂类翻译干预训练,使得在普通话、粤语等不同解说语言的智能字幕场景下,均能展示准确、专业的英文字幕。
中华文化包含着丰富多彩的方言文化,它们又汇聚形成了多样性方言文化生态。面对城市化进程加速等社会现实,关注多样性方言文化生态的保护和传承为可持续发展中应有之义。本次咪咕智能字幕创新向善,提升无障碍观赛温度,打造特色功能。特色粤语直播智能字幕,让更多用户群体无障碍感知方言文化魅力,助力方言文化生态的保护与传承,重新诠释无障碍观赛理念。