asoria/dask_test

This is a test on how to upload a dataset using dask:

```python
import dask.dataframe as dd

# First read from another repo or create your dataframe
df = dd.read_parquet("hf://datasets/asoria/columns_test@~parquet/**/*.parquet")

# And finally, push to HF repo
df.to_parquet('hf://datasets/asoria/dask_test')
```

以下为使用Dask上传数据集的测试示例：
python
import dask.dataframe as dd

# 首先从其他仓库读取数据或创建数据框
df = dd.read_parquet("hf://datasets/asoria/columns_test@~parquet/**/*.parquet")

# 最后将数据推送至HF（Hugging Face）仓库
df.to_parquet('hf://datasets/asoria/dask_test')

原始信息汇总

数据集概述

数据集名称

• dask_test

数据集创建过程

1. 使用dask.dataframe从另一个仓库或本地创建数据框。
2. 通过dd.read_parquet方法读取Parquet格式的数据集，数据源路径为hf://datasets/asoria/columns_test@~parquet/**/*.parquet。
3. 将处理后的数据框通过df.to_parquet方法保存为Parquet格式，并推送至Hugging Face仓库，目标路径为hf://datasets/asoria/dask_test。

数据集格式

• Parquet