CrowS-Pairs

displayName: CrowS-Pairs license: - CC BY-SA 4.0 taskTypes: - Stereotypical Bias Analysis mediaTypes: [] labelTypes: [] tags: - 评测 publisher: - New York University publishDate: '2020-11-01' publishUrl: https://github.com/nyu-mll/crows-pairs paperUrl: https://arxiv.org/pdf/2010.00133v1.pdf --- # 数据集介绍 ## 简介 CrowS-Pairs 有 1508 个示例，涵盖处理九种偏见的刻板印象，如种族、宗教和年龄。在 CrowS-Pairs 中，模型以两个句子呈现：一个更刻板印象，另一个更不刻板印象。这些数据侧重于对历史上处于不利地位的群体的刻板印象，并将它们与有利群体进行对比。 ## 引文 ``` @article{nangia2020crows, title={CrowS-pairs: A challenge dataset for measuring social biases in masked language models}, author={Nangia, Nikita and Vania, Clara and Bhalerao, Rasika and Bowman, Samuel R}, journal={arXiv preprint arXiv:2010.00133}, year={2020} } ``` ## Download dataset :modelscope-code[]{type="git"}displayName: CrowS-Pairs license: - CC BY-SA 4.0 taskTypes: - 刻板印象偏见分析（Stereotypical Bias Analysis） mediaTypes: [] labelTypes: [] tags: - 评测 publisher: - 纽约大学（New York University） publishDate: '2020-11-01' publishUrl: https://github.com/nyu-mll/crows-pairs paperUrl: https://arxiv.org/pdf/2010.00133v1.pdf --- # 数据集简介 ## 数据集概述 CrowS-Pairs 共包含1508条样本，覆盖九类偏见刻板印象，涉及种族、宗教与年龄等维度。在该数据集中，模型将接收两个句子作为输入：其一带有更强的刻板印象倾向，另一则刻板程度更低。本数据集聚焦于历史上曾处于弱势地位的群体的刻板印象，并将其与优势群体进行对照。 ## 引用格式 @article{nangia2020crows, title={CrowS-pairs: A challenge dataset for measuring social biases in masked language models}, author={Nangia, Nikita and Vania, Clara and Bhalerao, Rasika and Bowman, Samuel R}, journal={arXiv preprint arXiv:2010.00133}, year={2020} } ## 数据集下载 :modelscope-code[]{type="git"}

搜集汇总

背景与挑战

背景概述

CrowS-Pairs 数据集包含1508个示例，涵盖种族、宗教和年龄等九类偏见相关的刻板印象。每个示例提供两个句子：一个更具刻板印象，另一个较少刻板印象，旨在对比历史上处于劣势和优势群体的偏见。