WSC(Winograd Schema Challenge)

Winograd Schema Challenge 的引入既是图灵测试的替代方案，也是对系统进行常识推理能力的测试。 Winograd 模式是一对在一个或两个单词上不同的句子，具有高度模棱两可的代词，在两个句子中的解析方式不同，似乎需要常识知识才能正确解析。这些示例被设计为易于人类解决，但对机器而言却难以解决，原则上需要对文本内容及其描述的情况有深刻的理解。最初的 Winograd Schema Challenge 数据集由 AI 专家手动构建的 100 个 Winograd 模式组成。截至 2020 年，有 285 个示例可用；但是，最后 12 个示例是最近才添加的。为了确保与早期模型的一致性，一些作者通常更愿意只报告前 273 个示例的性能。这些数据集通常分别称为 WSC285 和 WSC273。