PARANMT-50M

我们描述了 PARANMT-50M，这是一个包含超过 5000 万个英语-英语句子释义对的数据集。在 Wieting 等人之后，我们通过使用神经机器翻译来翻译大型平行语料库的非英语部分来自动生成对。 （2017）。我们希望 ParaNMT-50M 可以成为释义生成的宝贵资源，并可以提供丰富的语义知识来源，以改善下游自然语言理解任务。为了展示它的实用性，我们使用 ParaNMT-50M 来训练在每个 SemEval 语义文本相似度竞争中优于所有监督系统的释义句子嵌入，此外还展示了它如何用于释义生成。