抖音上线自动翻译功能 可“一键生成”普通话字幕

9158APP 0

据介绍,创作者可以在抖音投稿主界面点击“拍摄并上传投稿”。上传视频后,使用“自动字幕”功能并选择“转换为普通话字幕”。新功能可以自动完成视频内容的方言语音。识别视频中的方言内容并将其转换为普通话字幕。

目前新功能第一阶段已上线,支持粤语、福建话、吴语(上海)、西南官话(四川)、中原官话(陕西、河南)等,后续将支持更多地区方言转换未来,IT之家的朋友们可以亲自体验一下。

抖音官方表示,由于当地方言往往以口语形式传播,可供模型训练的方言数据较少,这给方言识别和翻译带来了巨大挑战。对此,火山引擎技术团队采用自主研发的自监督预训练模型和多语言翻译模型,实现了用极少量标注数据识别方言的能力,训练效率提升一倍,有效提升多语言翻译性能,同时大幅降低模型训练的资源消耗。 “基于日常服务抖音集团业务的技术积累,抖音方言字幕可以实现超低延迟和高精度。”抖音团队负责人表示。

抖音平台治理相关负责人表示,将继续用科技记录真实美好的生活,未来还将持续升级方言自动翻译功能,服务以方言为载体的各地文化传播。