five

harmful_behaviors_ja

收藏
Hugging Face2026-06-27 更新2026-06-29 收录
下载链接:
https://huggingface.co/datasets/OS-Software/harmful_behaviors_ja
下载链接
链接失效反馈
官方服务:
资源简介:
该数据集是一个日语文本数据集,由原始英文数据集mlabonne/harmful_behaviors通过大语言模型自动翻译而来,使用的翻译模型为gemma-4-31B-it-qat-q4_0-uncensored-heretic-NVFP4-GGUF。数据集包含520个样本,划分为训练集(416个样本)和测试集(104个样本)。每个样本包含一个text字段,存储字符串类型的文本内容。数据文件按照分割存储在指定路径下。
创建时间:
2026-06-23
搜集汇总
数据集介绍
main_image_url
构建方式
该数据集源自英文原版数据集mlabonne/harmful_behaviors,通过采用大规模语言模型gemma-4-31B-it-qat-q4_0-uncensored-heretic-NVFP4-GGUF进行日文自动翻译构建而成。原始数据涵盖了多种潜在有害行为的描述文本,在翻译过程中力求保留原意的同时实现语言本地化。数据集共包含520条样本,其中训练集416条、测试集104条,均以文本形式存储,特征字段仅为'text',结构简洁明了。
特点
作为专注于日语场景的有害行为数据集,其独特之处在于通过自动化翻译技术高效实现了跨语言迁移,填补了日语有害内容检测领域的数据空白。数据集规模适中,训练与测试样本比例约为4:1,便于开展模型安全对齐实验。所有文本均以自然语言描述形式呈现,未进行额外标注或分类,保留了原始数据的直接性与原始性,为研究者提供了纯净的文本基础。
使用方法
使用者可通过HuggingFace Datasets库直接加载该数据集,指定配置名为'default'即可获取训练集与测试集。由于数据特征仅包含'text'字段,适用于文本分类、安全对齐、内容审核等自然语言处理任务。建议研究者将其用于日文语言模型的安全性评估与微调,结合原始英文数据集可开展跨语言有害行为检测的对比分析。加载时默认返回Unicode字符串格式,可直接接入下游模型输入管道。
背景与挑战
背景概述
在大语言模型安全对齐研究的浪潮中,针对日语的专项安全评测数据长期匮乏。harmful_behaviors_ja数据集应运而生,其创建于2024年,源自mlabonne团队在国际安全对齐领域成果的日语本地化工作,由研究者借助特定未审查模型进行自动翻译构建。该数据集聚焦于评测日语环境下模型对有害行为的拒答能力,填补了非英语高危行为测试语料的空白,为多语言安全对齐研究提供了关键基准,尤其在东亚语言模型的伦理约束评估中具有开拓性影响。
当前挑战
数据集当前面临多重挑战:首先,其所属的harmful behaviors领域旨在检测模型对暴力、欺诈等恶意指令的防御力,但当前版本仅含520条样本,且依赖单一未审查模型自动翻译,可能引入语义失真或文化语境偏差,导致对日语特有表达(如敬语攻击)的覆盖不足;其次,构建过程中的翻译质量难以保证,未实施人工校验,存在漏译或对抗性语义弱化风险;最后,该集完全复用英文原版类别,缺乏对日本社会敏感议题(如极右翼历史言论)的独立设计,其评测效度仍有待实证。
常用场景
经典使用场景
在日语自然语言处理与人工智能安全研究的交汇处,harmful_behaviors_ja数据集成为评估和提升大语言模型安全性的关键资源。该数据集的经典使用场景集中于对日语语言模型进行对抗性测试,通过提供精心设计的、可能引发模型生成有害内容的提示(如暴力、歧视或违法建议),来检验模型在危险情境下的响应能力。研究者利用这416个训练样本和104个测试样本,系统性地分析模型在拒绝有害指令、坚守伦理边界方面的表现,从而为构建更负责任的日语AI系统奠定实证基础。
实际应用
在实际产业场景中,该数据集为日本本土AI产品的安全部署提供了不可或缺的校准工具。例如,智能制造企业可利用其对日语客服聊天机器人进行压力测试,确保机器人不会在客户纠纷中生成侮辱性或欺诈性回复;社交媒体平台可借助它审核内容审核模型,避免因漏判日语仇恨言论而引发法律与声誉风险。此外,教育科技公司能通过该数据集训练辅导型助手,使其在解答敏感课题时始终维持建设性边界,从而在生产力与安全性之间取得精细平衡。
衍生相关工作
harmful_behaviors_ja的衍生工作呈现出从静态测试到动态防御的演进脉络。基于该数据集,研究者开发了针对日语模型的红队评估框架(如J-RedTeam),系统化生成越狱提示以识别模型脆弱点。另有一批工作聚焦于安全对齐的数据增强策略,利用该样本库构建自动化的有害输入检测器,显著提升了模型对日语变体毒性表达的识别率。这些经典工作共同催生了日语AI安全领域的基准体系,并启发了一系列跨语言安全对比研究,为多语种AI系统的韧性设计提供了宝贵参照。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务