opentensor/openvalidators-test

OpenValidators数据集由OpenTensor Foundation创建，是一个不断增长的数据集合，包含由OpenValidators项目生成的数十万条记录。该数据集主要用于Bittensor网络中的研究人员、数据科学家和矿工，提供网络性能、节点行为和wandb运行详细信息。研究人员可以通过该数据集发现模式，数据科学家可以用于训练模型和分析，矿工则可以利用生成的数据优化模型并增强其在网络中的激励。数据集的持续更新支持去中心化计算领域的协作和创新。

原始信息汇总

数据集概述

数据集名称

OpenValidators 数据集

数据集创建者

OpenTensor 基金会

数据集描述

OpenValidators 数据集是一个由 OpenTensor 基金会创建的持续增长的数据集，包含数十万条记录，主要用于 Bittensor 网络中的研究、数据科学和挖矿活动。该数据集提供网络性能、节点行为和 wandb 运行细节等信息，支持研究人员洞察和模式检测，数据科学家用于模型训练和分析，以及矿工用于模型微调和网络激励增强。

数据集使用方法

• 下载方式：
  • 通过 run_id 下载特定运行数据。
  • 通过 OpenValidators 版本下载所有相关运行数据。
  • 通过多个 OpenValidators 版本下载数据。
• 数据处理：使用 datasets 库加载和预处理数据。
• 元数据分析：使用 pandas 和 hugging face 数据集结构分析元数据。

数据集结构

• 数据实例：
  • versioned raw_data：原始数据，未进一步预处理或标记化。
  • metadata：定义 wandb 数据摄入的当前状态。
• 数据字段：
  • Raw data：包含运行时、步骤、时间戳、答案完成度、奖励等。
  • Metadata：包含运行 ID、完成状态、下载状态、最后检查点等。

数据集创建

• 数据收集：通过专门的 worker 从 wandb 收集数据，并摄入到 Hugging Face 数据集结构中。
• 源数据语言生产者：所有在 wandb 中记录数据的 OpenValidators 节点。

许可证

MIT 许可证

数据集支持的任务和引用信息

• 支持任务：[待补充]
• 引用信息：[待补充]