wikisum

### Clone with HTTP ```bash git clone https://www.modelscope.cn/datasets/huangjintao/wikisum.git ``` 迁移来源: https://www.huggingface.co/datasets/d0rj/wikisum 使用sdk下载(python) ```python from modelscope import MsDataset dataset = MsDataset.load('huangjintao/wikisum', subset_name='default', split='train').to_hf_dataset() print(dataset) """ Dataset({ features: ['url', 'title', 'summary', 'article', 'step_headers'], num_rows: 35775 }) """ ```### 通过HTTP协议克隆 bash git clone https://www.modelscope.cn/datasets/huangjintao/wikisum.git 迁移源地址：https://www.huggingface.co/datasets/d0rj/wikisum ### 通过Python SDK下载 python from modelscope import MsDataset dataset = MsDataset.load('huangjintao/wikisum', subset_name='default', split='train').to_hf_dataset() print(dataset) """ 数据集信息： { 特征字段: ['url', 'title', 'summary', 'article', 'step_headers'], 样本总数: 35775 } """

搜集汇总

背景与挑战

背景概述

wikisum数据集是一个用于文本摘要任务的英文数据集，包含35775条数据，每条数据包含文章、摘要等字段。该数据集迁移自Hugging Face平台，采用Apache License 2.0许可协议，适用于微调等自然语言处理应用。