一个模型搞定38个稀有语种,火山翻译翻译能力再升级
2022-01-18 11:17:45 来源:
(原标题:一个模型搞定38个稀有语种,火山翻译翻译能力再升级)
近期,火山翻译官网上新了包括世界语、塔希提语、鞑靼语等在内的38个稀有语种的翻译。目前,包括汉语、英语、阿拉伯语、俄语、法语、西班牙语六个通用语种在内,火山翻译已具备94个语种、8742个语向的翻译能力,整体 bleu(机器翻译质量自动评估指标)达33。45,处于行业领先水平。
据了解,通过采用自研的 mRASP 多语言模型,火山翻译仅使用一个模型就完成了上述38个语种与英文的双向互译,突破了传统双语言翻译模型对每个语向单独训练、单独上线服务的方式,大幅降低机器学习的训练和服务成本。
“通常情况下,训练76个语向的双语言模型需要150-200天。而相同硬件条件下,训练一个多语言模型只需要30天。”火山翻译团队介绍,“对于请求量小的语种,使用 mRASP 模型集中服务可以大大节省计算资源,仅需半张用于深度学习训练的 Tesla T4显卡就可以满足38个语言的全部翻译请求,和双语翻译所需的资源一样。”
图说:蓝色部分为火山翻译上新的38个语种
由于稀有语种缺少训练用的平行语料,翻译质量往往容易大打折扣。火山翻译通过 mRASP 中的对比学习和词对齐信息,可以很好地借助单语语料和其他拥有丰富语料的语种来帮助训练,弥补训练数据的不足。数据显示,火山翻译此次上新的稀有语种平均 bleu 值达33。36,其中,海地语翻译表现最为突出,bleu 值达50。76。
火山翻译由字节跳动 AI Lab 研发。2021年,火山翻译凭借“并行翻译”技术一举打破了“自回归式”技术在机器翻译领域的绝对统治地位,夺得国际机器翻译大赛(WMT)德语到英语方向机器翻译冠军;此前,火山翻译已在WMT中荣获7项冠军, 并斩获了平行语料过滤对齐项目的2项第一。
目前,火山翻译拥有火山同传、机器翻译与视频翻译三大产品,支持飞书、今日头条、西瓜视频等业务的翻译需求,并通过字节跳动旗下的企业级技术服务平台火山引擎对外提供翻译服务。
-
一个模型搞定38个稀有语种,火山翻译翻译能力再升级
(原标题:一个模型搞定38个稀有语种,火山翻译翻译能力再升级) 近期,火山翻译官网上新了包括世界语、塔希提语、鞑靼语等在内
2022-01-18 11:17
-
“没有平行宇宙,只能靠AB测试”,火山引擎详解四大实验价值
(原标题:“没有平行宇宙,只能靠A B测试”,火山引擎详解四大实验价值) 如何评估一个决策是否有效?比如在暑假前,运营团队
2022-01-18 10:31
-
Leader杭州发布13款时尚智慧新品布局智慧家庭
Leader时尚智慧新品杭州:设计年轻人的家 5月22日,年轻化家电品牌Leader在杭州发布了13款时尚智慧新品以及战略爆品,范围覆盖冰箱、洗
2022-01-18 09:45
-
凭实力获得消费者认可,三星GalaxyA60元气版再次开卖
说到目前千元机市场,三星电子推出的千元旗舰标杆Galaxy A60元气版肯定不得不提。其凭借着极具诚意的产品竞争力,在千元机市场有着超乎寻
2022-01-18 08:25
-
沣西新城海绵城市建设,与科顺雨水管理系统强强联合!
中国二氧化碳排放力争于2030年前达到峰值,努力争取2060年前实现碳中和。 全国两会过后,碳中和迅速从陌生专业术语成为一个高频热词。
2022-01-18 07:39
-
江西有个村实现了夏天无蚊是什么村蚂蚁新村1月15日答案最新
江西有个村实现了夏天无蚊,这个无蚊村是?这是蚂蚁新村小课堂1月15日的问题,答对即可获得3个村民作为奖励,那么接下来就让我们一起了解
2022-01-18 06:51