字节跳动火山翻译上新 38 个稀有语种,自研训练

 头条123   2025-05-20 07:56   4311 人阅读  0 条评论
字节跳动火山翻译上新 38 个稀有语种,自研训练 2021 年 12 月,字节跳动旗下的火山翻译官网,上新了包罗天下语、塔希提语、鞑靼语等正在内的 38 个罕见语种的翻译。今朝,包罗汉语、英语、 语、俄语、法语、西班牙语六个通用语种正在内,火山翻译已具有 94 个语种、8742 个语向的翻译才能,团体 bleu(机械翻译量量主动评价目标)达 33.45,处于行业抢先程度。

▲ 蓝色部门为火山翻译上新的 38 个语种

据领会,经由过程采取自研的 mRASP 多说话模子,火山翻译仅利用一个模子就完成了上述 38 个语种与英文的双向互译,冲破了传统双说话翻译模子对每一个语向零丁练习、零丁上线办事的体例,年夜幅下降机械进修的练习和办事本前。

“凡是环境下,练习 76 个语向的双说话模子需求 150-200 天。而不异硬件前提下,练习一个多说话模子只需求 30 天。”火山翻译团队先容,“对要求量小的语种,利用 mRASP 模子集合办事能够年夜年夜节流计较资本,仅需半张用于深度进修练习的 Tesla T4 显卡便可以知足 38 个说话的全数翻译要求,和双语翻译所需的资本一样。”

火山翻译经由过程 mRASP 中的对照进修和词对齐信息,能够很好地借助单语语料和其他具有丰硕语料的语种来帮忙练习,填补练习数据的不敷。数据显现,火山翻译此次上新的罕见语种均匀 bleu 值达 33.36,此中,海地语翻译表示 为凸起,bleu 值达 50.76。

今朝,火山翻译具有:火山同传、机械翻译与视频翻译三年夜产物,撑持飞书、本日头条、西瓜视频等营业的翻译需求,并经由过程字节跳动旗下的企业级手艺办事平台火山引擎对外供给翻译办事。

本文地址:https://www.toutiao123.net/news/29686.html
版权声明:本文为原创文章,版权归 头条123 所有,欢迎 本文,转载请保留出处!