ReferItGame

在本文中，我们介绍了一种新的游戏，用于众包自然语言指代表达。通过设计一个两人游戏，我们可以直接在游戏中收集和验证引用表达式。迄今为止，该游戏已经在 19,894 张自然场景照片中生成了一个包含 130,525 个表情的数据集，涉及 96,654 个不同的对象。这个数据集比以前的 REG 数据集更大、更多样化，使我们能够研究现实世界场景中的引用表达。我们提供对结果数据集的深入分析。根据我们的发现，我们设计了一个新的基于优化的模型来生成引用表达式，并对 3 个测试集进行实验评估。