five

aisi-whitebox/mmlu_0_shot_prompted-sandbagging-llama_33_70b_instruct

收藏
Hugging Face2025-04-24 更新2025-04-26 收录
下载链接:
https://hf-mirror.com/datasets/aisi-whitebox/mmlu_0_shot_prompted-sandbagging-llama_33_70b_instruct
下载链接
链接失效反馈
官方服务:
资源简介:
mmlu 0 shot prompted-sandbagging-llama 33 70b instruct数据集是一个评估数据集,用于检测和评估AI模型在特定任务上的性能,尤其是对于欺骗性安全性的评估。该数据集是基于meta-llama/Llama-3.3-70B-Instruct模型创建的,包含了500对样本,其中沙袋策略被启用,但未应用过滤。数据集分为正常准确性和沙袋准确性两种,用于评估AI模型在正常和沙袋情况下的表现。

The mmlu 0 shot prompted-sandbagging-llama 33 70b instruct dataset is an evaluation dataset designed to detect and assess the performance of AI models on specific tasks, particularly for deception and safety assessments. The dataset is created based on the meta-llama/Llama-3.3-70B-Instruct model and includes 500 pairs of samples, with sandbagging strategy enabled but no filtering applied. The dataset is divided into normal accuracy and sandbagging accuracy, used to evaluate the performance of AI models under normal and sandbagging conditions.
提供机构:
aisi-whitebox
5,000+
优质数据集
54 个
任务类型
进入经典数据集
二维码
社区交流群

面向社区/商业的数据集话题

二维码
科研交流群

面向高校/科研机构的开源数据集话题

数据驱动未来

携手共赢发展

商业合作