Lambent/quantum-computing-1024-fineweb-sample
收藏Hugging Face2024-07-05 更新2024-06-29 收录
下载链接:
https://hf-mirror.com/datasets/Lambent/quantum-computing-1024-fineweb-sample
下载链接
链接失效反馈官方服务:
资源简介:
这是一个用于测试数据采样和过滤脚本的测试数据集。数据集配置包括从HuggingFaceFW/fineweb-edu数据集中筛选出与量子计算相关的条目,输出文件为quantum_computing_entries.jsonl,状态文件为quantum_computing_dataset_state.json。处理参数包括关键词过滤(如quantum computing、qubit等)、最大条目数(1024)、最小和最大标记数(1024和2048)、最小内部评分(4)。此外,配置还包括洗牌选项(启用洗牌,种子值为42)。
这是一个用于测试数据采样和过滤脚本的测试数据集。数据集配置包括从HuggingFaceFW/fineweb-edu数据集中筛选出与量子计算相关的条目,输出文件为quantum_computing_entries.jsonl,状态文件为quantum_computing_dataset_state.json。处理参数包括关键词过滤(如quantum computing、qubit等)、最大条目数(1024)、最小和最大标记数(1024和2048)、最小内部评分(4)。此外,配置还包括洗牌选项(启用洗牌,种子值为42)。
提供机构:
Lambent



