自本年5月哔哩哔哩(以下简称B站)通知将下架原国际版APP,与国内版同一为一个长入APP后,近日,在本年的寰宇东谈主工智能大会上,B站公布了其为做事国际用户而全新自研的“AI原声翻译功能”,以便国际用户更好体验游戏、科技、二次元等主推本体。

本次发布的“AI原声翻译”功能除了自动擦除中翰墨幕改为英文、弹幕翻译及种种按钮英文适配等基础的文本互译以外,还能竣工收复UP主的声线、音色、气口,而非传统的机器音翻译,同期还能基于翻译说话进行口型模拟。这意味着在改日汉文用户不雅看外语UP主视频或国际用户不雅看汉文UP主视频时能无永诀体验原汁原味的“腹地化”翻译视频。后续,B站还将视需求把日语等说话加入“AI原声翻译”功能中。
据悉,为攻克“AI”原声翻译功能“中的中枢挑战——尤其在游戏、二次元等专名梗点密集鸿沟——达成原格调精确保留与语音时长竣工对应,B站手艺团队基于大说话模子构建翻译引擎,基于语音时长匹配、原声翻译尺度与UP主独到格调构建多缠绵奖励模子,并聘请抵抗式强化学习检修开动模子抓续进化与精确适配。同期,引入Deep Research深度挖掘手艺,专攻专着名词与流行梗点的翻译难点,确保最终译文准确、纯正、逼真。字幕擦除部分则邻接了先进的多模态大模子OCR手艺和基于STTN鸠集的视频重绘手艺,达成字幕区域的精确检测与高收复度擦除。
文/北京后生报记者 温婧
剪辑/胡克青开yun体育官网入口登录app开云体育