《表2 不同平行语料训练结果》
基线系统(baseline)采用Lee等[10]提出的基于迭代优化的非自回归序列模型中的自回归模型Transformer,使用小的训练模型,设置d_moder=278,d_hidden=507,p_droput=0.1,n_layer=5和n_head=2,t_warmup=746,训练步数为200 000。分别采用warm up和linear annealing的学习率调节方法。训练结果见表2,在CWMT2017维汉平行语料上采用策略warm up时,翻译质量的BLEU值为43.33和解码速度为873.99 Tokens/s作为基线系统(自回归模型)。
图表编号 | XD00163198800 严禁用于非法目的 |
---|---|
绘制时间 | 2020.07.10 |
作者 | 朱相荣、王磊、杨雅婷、董瑞、张俊 |
绘制单位 | 中国科学院新疆理化技术研究所、中国科学院大学、中国科学院新疆理化技术研究所新疆民族语音语言信息处理实验室、中国科学院新疆理化技术研究所、中国科学院大学、中国科学院新疆理化技术研究所新疆民族语音语言信息处理实验室、中国科学院新疆理化技术研究所、中国科学院大学、中国科学院新疆理化技术研究所新疆民族语音语言信息处理实验室、中国科学院新疆理化技术研究所、中国科学院大学、中国科学院新疆理化技术研究所新疆民族语音语言信息处理实验室、中国科学院新疆理化技术研究所、中国科学院新疆理化技术研究所新疆民族语音语言信息处理实验 |
更多格式 | 高清、无水印(增值服务) |