AnlamVer

在本文中，我们提出了 AnlamVer，这是一个用于土耳其语的语义模型评估数据集，旨在评估单词相似性和单词相关性任务，同时区分这两种关系。我们的数据集由 500 个单词对组成，由 12 个人类受试者注释，每对具有相似性和相关性两个不同的分数。选择词对以通过词的多个属性和词对关系（例如频率、形态、具体性和关系类型（例如，同义词、反义词））来评估分布式语义模型。我们的目标是通过评估多个属性的模型，为语义模型研究人员提供见解。我们通过频率来平衡数据集词对，以评估语义模型对词汇外和稀有词问题的鲁棒性，这些问题是由土耳其语丰富的派生和屈折形态引起的。