HATEDAY

HATEDAY数据集是由牛津大学等机构创建的首个全球性仇恨言论数据集，旨在解决在线仇恨言论检测的全球挑战。该数据集包含240,000条标注的推文，随机抽样自2022年9月21日发布的所有推文，涵盖阿拉伯语、英语、法语、德语、印度尼西亚语、葡萄牙语、西班牙语和土耳其语八种语言，以及美国、印度、尼日利亚和肯尼亚四个国家。数据集的创建过程包括数据收集、过滤和标注，确保了语言和国家的代表性。HATEDAY数据集的应用领域主要集中在仇恨言论检测模型的评估和改进，旨在提高模型在实际社交媒体环境中的检测性能。

The HATEDAY dataset is the first global hate speech dataset developed by institutions including the University of Oxford, aiming to address the global challenge of online hate speech detection. It contains 240,000 labeled tweets randomly sampled from all posts published on September 21, 2022, covering 8 languages: Arabic, English, French, German, Indonesian, Portuguese, Spanish and Turkish, as well as four countries: the United States, India, Nigeria and Kenya. The dataset's construction process includes data collection, filtering and annotation, ensuring the representativeness of the covered languages and regions. The primary application fields of the HATEDAY dataset focus on the evaluation and refinement of hate speech detection models, with the goal of improving the detection performance of such models in real-world social media environments.

搜集汇总

数据集介绍

构建方式

HATEDAY数据集的构建基于2022年9月21日发布的所有推文，涵盖了八种语言和四个英语为主要语言的国家。数据集通过随机抽样方法，从这些推文中选取了240,000条推文，并进行了详细的标注。标注过程由36名标注员完成，每位标注员负责一种语言或国家，确保了数据集的多语言和多地域代表性。标注分为三类：仇恨性、冒犯性和中性，进一步细化了仇恨性推文的目标群体，以捕捉不同语言和国家的仇恨言论特征。

特点

HATEDAY数据集的显著特点在于其全球代表性和多语言覆盖，首次实现了对社交媒体环境中仇恨言论的全面捕捉。数据集不仅包含了八种主要语言的推文，还特别关注了四个英语国家的推文，揭示了仇恨言论在不同语言和文化背景下的表现差异。此外，数据集通过详细的标注和多轮审核，确保了标注的高质量和一致性，为后续的仇恨言论检测研究提供了坚实的基础。

使用方法

HATEDAY数据集适用于多种仇恨言论检测模型的评估和训练。研究者可以利用该数据集进行跨语言和跨国家的仇恨言论检测性能比较，探索模型在不同语言环境下的表现。此外，数据集还可用于开发和验证新的仇恨言论检测算法，特别是在处理多语言和多文化背景下的仇恨言论时。通过分析数据集中的标注信息，研究者可以深入理解仇恨言论的构成和分布，从而提出更有效的检测和干预策略。

背景与挑战

背景概述

HATEDAY数据集由牛津大学、世界银行、纽约大学等多机构联合创建，旨在应对全球在线仇恨言论的挑战。该数据集于2022年9月21日从Twitter上随机抽取了240,000条推文，涵盖八种语言和四个英语为主要语言的国家。HATEDAY的推出填补了现有评估数据集在地理和语言代表性上的空白，揭示了学术数据集在真实世界应用中的性能高估问题，尤其在非欧洲语言中表现尤为明显。这一研究不仅为跨语言和跨国家的仇恨言论检测提供了新的基准，还强调了未来检测模型在真实社交媒体环境中评估的必要性。

当前挑战

HATEDAY数据集面临的挑战主要包括两个方面。首先，学术数据集的系统性偏见导致仇恨言论检测模型在真实世界中的性能被高估，尤其是在非欧洲语言环境中。其次，构建过程中遇到的挑战包括语言和地理代表性的确保，以及模型在区分仇恨言论与攻击性言论上的困难。此外，学术研究中对某些仇恨言论目标的关注与真实世界中的实际分布不一致，进一步影响了模型的性能。这些挑战凸显了在真实社交媒体环境中评估和改进仇恨言论检测模型的迫切需求。

常用场景

经典使用场景

HATEDAY数据集的经典应用场景在于其为跨语言和跨国家的仇恨言论检测提供了宝贵的资源。通过分析2022年9月21日Twitter上发布的推文，该数据集涵盖了阿拉伯语、英语、法语、德语、印度尼西亚语、葡萄牙语、西班牙语和土耳其语等八种语言，以及美国、印度、尼日利亚和肯尼亚四个以英语为主要语言的国家。研究者利用这一数据集，可以深入探讨不同语言和文化背景下仇恨言论的流行程度和构成差异，从而开发和评估更为精准的仇恨言论检测模型。

实际应用

在实际应用中，HATEDAY数据集为社交媒体平台的内容审核提供了重要的参考。通过分析不同语言和国家的仇恨言论数据，平台可以更有效地调整其仇恨言论检测算法，以适应多样化的用户群体和语言环境。此外，该数据集还可以用于培训和测试人工智能模型，以提高其在多语言环境下的仇恨言论检测能力。最终，HATEDAY数据集的应用有助于提升社交媒体平台的内容审核效率和准确性，从而为用户提供一个更为安全和健康的在线环境。

衍生相关工作

HATEDAY数据集的发布催生了一系列相关研究工作，推动了仇恨言论检测领域的进一步发展。例如，研究者们利用该数据集开发了新的多语言仇恨言论检测模型，并探讨了如何在不同文化背景下优化这些模型。此外，HATEDAY还激发了对仇恨言论检测模型性能评估方法的重新思考，促使学术界和工业界更加关注模型在实际应用中的表现。未来，随着更多基于HATEDAY的研究成果的涌现，预计将会有更多创新的方法和技术被应用于仇恨言论检测领域。