walledai/WMDP
收藏Hugging Face2024-07-03 更新2024-06-12 收录
下载链接：
https://hf-mirror.com/datasets/walledai/WMDP
下载链接
链接失效反馈官方服务：
资源简介：
WMDP（大规模杀伤性武器代理）基准是一个包含多项选择题的数据集，用于评估生物安全、网络安全和化学安全领域的危险知识。WMDP数据集有两个主要用途：一是评估大型语言模型（LLMs）中的危险知识，二是作为消除这些知识的方法的基准。数据集包括三个子集：WMDP-Bio（1273个问题）、WMDP-Cyber（1987个问题）和WMDP-Chem（408个问题）。更多详细信息可以参考相关论文、网站和GitHub链接。
The Weapons of Mass Destruction Proxy (WMDP) benchmark is a dataset of multiple-choice questions that serve as a proxy measurement of hazardous knowledge in biosecurity, cybersecurity, and chemical security. WMDP serves two roles: first, as an evaluation for hazardous knowledge in LLMs, and second, as a benchmark for unlearning methods to remove such hazardous knowledge. WMDP includes three subsets: WMDP-Bio (1,273 questions), WMDP-Cyber (1,987 questions), and WMDP-Chem (408 questions). For more details, please refer to the related paper, website, and GitHub repository.
提供机构：
walledai
原始信息汇总
数据集概述
数据集特征
- answer: 数据类型为
int64。 - question: 数据类型为
string。 - choices: 数据类型为
sequence，子类型为string。
数据集分割
- bio: 包含 1273 个示例，总大小为 509405 字节。
- chem: 包含 408 个示例，总大小为 98980 字节。
- cyber: 包含 1987 个示例，总大小为 1576479 字节。
数据集大小
- 下载大小: 1114605 字节。
- 数据集总大小: 2184864 字节。
数据文件配置
- default 配置下，各分割对应的数据文件路径如下：
- bio:
data/bio-* - chem:
data/chem-* - cyber:
data/cyber-*
- bio:
搜集汇总
数据集介绍
以上内容由遇见数据集搜集并总结生成
