DiaBLa

一个新的英语-法语测试集，用于评估机器翻译 (MT) 的非正式书面双语对话。测试集包含以英语和法语为母语的人之间的 144 个自发对话（5,700 多个句子），由一系列角色扮演设置中的两个神经 MT 系统之一介导。对话伴随着机器翻译质量的细粒度句子级判断，由对话参与者自己产生，以及人工规范化的版本和后验产生的参考翻译。