0-hero/Matter-0.1-Slim-A

---
license: apache-2.0
---

Subset A of [Matter-0.1](https://huggingface.co/datasets/0-hero/Matter-0.1) <br>
Datasets have been deduped, decontaminated with the [bagel script from Jon Durbin](https://github.com/jondurbin/bagel/blob/main/bagel/data_sources/__init__.py)

许可证：Apache-2.0

本数据集为[Matter-0.1](https://huggingface.co/datasets/0-hero/Matter-0.1)的子集A。
本数据集已完成去重处理，并通过Jon Durbin编写的[bagel脚本](https://github.com/jondurbin/bagel/blob/main/bagel/data_sources/__init__.py)完成了数据去污染操作。

原始信息汇总

数据集概述

数据集名称

• Subset A of Matter-0.1

许可证

• Apache-2.0

数据处理

• 数据已去重和去污染，使用Jon Durbin的bagel脚本进行处理。