five

jordan-taylor-aisi/test_cot_2

收藏
Hugging Face2025-04-09 更新2025-04-12 收录
下载链接:
https://hf-mirror.com/datasets/jordan-taylor-aisi/test_cot_2
下载链接
链接失效反馈
官方服务:
资源简介:
这是一个用于评估的欺骗性检测数据集,创建于2025年4月9日,使用了vllm/meta-llama/Llama-3.1-8B-Instruct模型。数据集包含的任务是inspect_evals/wmdp_bio,用于检测sandbagging行为。数据集没有进行分割,但提供了测试集和验证集的大小及随机种子。数据显示,正常准确度为80%,sandbagging准确度为40%。

This is an evaluation dataset for deception detection, created on April 9, 2025, using the vllm/meta-llama/Llama-3.1-8B-Instruct model. The dataset includes the task inspect_evals/wmdp_bio for detecting sandbagging behavior. The dataset is not split, but the sizes of the test set and validation set, as well as the random seed, are provided. The data show that the normal accuracy is 80%, and the sandbagging accuracy is 40%.
提供机构:
jordan-taylor-aisi
5,000+
优质数据集
54 个
任务类型
进入经典数据集
二维码
社区交流群

面向社区/商业的数据集话题

二维码
科研交流群

面向高校/科研机构的开源数据集话题

数据驱动未来

携手共赢发展

商业合作