Finnish-NLP/Reddit_fi_2006_2022_cleaned_v2
收藏Hugging Face2023-12-21 更新2024-03-04 收录
下载链接：
https://hf-mirror.com/datasets/Finnish-NLP/Reddit_fi_2006_2022_cleaned_v2
下载链接
链接失效反馈官方服务：
资源简介：
该数据集包含文本数据及其对应的多个标签，包括身份攻击、侮辱、淫秽、严重毒性、威胁和毒性等。此外，还包含一个困惑度指标。数据集分为一个训练集，包含3,955,721个样本，总大小为1,405,287,230字节。下载大小为890,808,525字节。
该数据集包含文本数据及其对应的多个标签，包括身份攻击、侮辱、淫秽、严重毒性、威胁和毒性等。此外，还包含一个困惑度指标。数据集分为一个训练集，包含3,955,721个样本，总大小为1,405,287,230字节。下载大小为890,808,525字节。
提供机构：
Finnish-NLP
原始信息汇总
数据集概述
特征信息
- text: 文本数据，数据类型为字符串。
- label_identity_attack: 标识攻击标签，数据类型为浮点数。
- label_insult: 侮辱标签，数据类型为浮点数。
- label_obscene: 淫秽标签，数据类型为浮点数。
- label_severe_toxicity: 严重毒性标签，数据类型为浮点数。
- label_threat: 威胁标签，数据类型为浮点数。
- label_toxicity: 毒性标签，数据类型为浮点数。
- perplexity_kenlm: KenLM困惑度，数据类型为整数。
数据分割
- train: 训练集，包含1405287230字节的数据和3955721个样本。
数据集大小
- 下载大小: 890808525字节
- 数据集大小: 1405287230字节
配置信息
- config_name: default
- data_files:
- split: train
- path: data/train-*
