DiaBLa

一个新的英语-法语测试集，用于评估机器翻译 (MT) 的非正式书面双语对话。测试集包含以英语和法语为母语的人之间的 144 个自发对话（5,700 多个句子），由一系列角色扮演设置中的两个神经 MT 系统之一介导。对话伴随着机器翻译质量的细粒度句子级判断，由对话参与者自己产生，以及人工规范化的版本和后验产生的参考翻译。A novel English-French test set for evaluating machine translation (MT) on informal written bilingual dialogues. The test set comprises 144 spontaneous dialogues (over 5,700 sentences) between native English and native French speakers, mediated by one of two neural MT systems across a series of role-play scenarios. The dialogues are accompanied by fine-grained sentence-level MT quality judgments generated by the dialogue participants themselves, along with manually normalized versions and post-hoc reference translations.

搜集汇总

背景与挑战

背景概述

DiaBLa是一个英语-法语非正式书面双语对话测试集，包含144个自发对话，由神经机器翻译系统在角色扮演设置中介导。该数据集提供了句子级机器翻译质量判断、人工规范化版本及后验参考翻译，用于评估机器翻译性能。