reddit_dataset_217
收藏资源简介：
Bittensor Subnet 13 Reddit数据集是Bittensor Subnet 13分布式网络的一部分，包含了预处理后的Reddit数据，这些数据由网络矿工实时更新，提供了用于各种分析和机器学习任务的Reddit内容流。数据集适用于多种任务，如情感分析、主题建模、社区分析和内容分类。数据主要以英文为主，但也包含多语言内容。每个数据实例包含文本、标签、数据类型、社区名称、日期、编码后的用户名和URL等字段。由于数据集持续更新，用户需根据需求和时间戳自行创建数据分割。数据来源于Reddit的公开帖子，遵循平台的服务条款和API使用指南，对用户名和URL进行了编码以保护隐私。
数据集概述
基本信息
- 数据集名称: Bittensor Subnet 13 Reddit Dataset
- 数据集仓库: tensorshield/reddit_dataset_217
- 许可证: MIT
- 多语言支持: 多语言（主要为英语）
- 来源数据集: 原始数据
数据集描述
- 子网: Bittensor Subnet 13
- 矿工热键: 5GQcotswAC2zF1JspHCefwSXfKruDxovUhV1Dsgm5oj3x9N9
- 数据集摘要: 该数据集是Bittensor Subnet 13去中心化网络的一部分，包含预处理的Reddit数据。数据由网络矿工持续更新，提供实时的Reddit内容流，适用于各种分析和机器学习任务。
支持的任务
- 文本分类
- 标记分类
- 问答系统
- 文本摘要
- 文本生成
- 情感分析
- 主题分类
- 命名实体识别
- 语言建模
- 文本评分
- 多类分类
- 多标签分类
- 抽取式问答
- 新闻文章摘要
数据集结构
数据实例
每个实例代表一个Reddit帖子或评论，包含以下字段：
text(字符串): 帖子或评论的主要内容。label(字符串): 内容的情感或主题类别。dataType(字符串): 指示条目是帖子还是评论。communityName(字符串): 发布内容的子版块名称。datetime(字符串): 内容发布或评论的日期。username_encoded(字符串): 用户名的编码版本，以保护用户隐私。url_encoded(字符串): 内容中包含的URL的编码版本。
数据分割
数据集持续更新，没有固定的分割。用户应根据自己的需求和数据的时戳创建自己的分割。
数据集创建
源数据
数据收集自Reddit的公开帖子和评论，遵循平台的条款和服务及API使用指南。
个人和敏感信息
所有用户名和URL均被编码以保护用户隐私。数据集不包含个人或敏感信息。
使用注意事项
社会影响和偏见
用户应注意Reddit数据中可能存在的偏见，包括人口统计和内容偏见。此数据集反映了Reddit上表达的内容和观点，不应被视为一般人群的代表性样本。
限制
- 数据质量可能因媒体来源的性质而异。
- 数据集可能包含社交媒体平台典型的噪声、垃圾或无关内容。
- 由于实时收集方法，可能存在时间偏差。
- 数据集仅限于公共子版块，不包括私人或受限社区。
附加信息
引用信息
@misc{tensorshield2025datauniversereddit_dataset_217, title={The Data Universe Datasets: The finest collection of social media data the web has to offer}, author={tensorshield}, year={2025}, url={https://huggingface.co/datasets/tensorshield/reddit_dataset_217}, }
贡献
如需报告问题或贡献数据集，请联系矿工或使用Bittensor Subnet 13治理机制。
数据集统计
- 总实例数: 369118
- 日期范围: 2014-09-07T00:00:00Z 至 2025-01-28T00:00:00Z
- 最后更新时间: 2025-03-29T15:00:25Z
数据分布
- 帖子: 6.86%
- 评论: 93.14%
前10名子版块
| 排名 | 主题 | 总数 | 百分比 |
|---|---|---|---|
| 1 | r/announcements | 142161 | 38.51% |
| 2 | r/blackmagicfuckery | 42631 | 11.55% |
| 3 | r/place | 27246 | 7.38% |
| 4 | r/YouShouldKnow | 25210 | 6.83% |
| 5 | r/HealthyFood | 18776 | 5.09% |
| 6 | r/IAmA | 18248 | 4.94% |
| 7 | r/Whatcouldgowrong | 17542 | 4.75% |
| 8 | r/Fitness | 16777 | 4.55% |
| 9 | r/MovieDetails | 14827 | 4.02% |
| 10 | r/recipes | 5444 | 1.47% |
