davidberenstein1957/test
收藏数据集卡片 for test
数据集描述
数据集概述
该数据集包含:
- 符合Argilla数据集格式的配置文件
argilla.yaml,用于在使用FeedbackDataset.from_huggingface方法时配置数据集。 - 兼容HuggingFace
datasets格式的数据记录,这些记录在使用FeedbackDataset.from_huggingface时会自动加载,也可以通过datasets库的load_dataset方法独立加载。 - 用于构建和整理数据集的标注指南(如果已在Argilla中定义)。
加载方法
使用Argilla加载
安装Argilla并使用以下代码加载数据集:
python import argilla as rg
ds = rg.FeedbackDataset.from_huggingface("davidberenstein1957/test")
使用datasets库加载
安装datasets库并使用以下代码加载数据集:
python from datasets import load_dataset
ds = load_dataset("davidberenstein1957/test")
支持的任务和排行榜
该数据集可以包含多个字段、问题和响应,因此可以用于不同的NLP任务,具体取决于配置。数据集结构在数据集结构部分中描述。
该数据集没有关联的排行榜。
语言
数据集结构
数据在Argilla中
数据集在Argilla中包含以下元素:
- 字段(Fields):数据记录本身,目前仅支持文本字段。
| 字段名 | 标题 | 类型 | 必填 | Markdown |
|---|---|---|---|---|
| title | Title | text | True | True |
| org_found | Org_found | text | True | False |
| content | Content | text | True | True |
| article_id | Article_id | text | True | False |
| prod_status | Prod_status | text | True | False |
- 问题(Questions):向标注者提出的问题,可以是评分、文本、标签选择、多标签选择或排序类型。
| 问题名 | 标题 | 类型 | 必填 | 描述 | 值/标签 |
|---|---|---|---|---|---|
| relevant_company | Is this news article related to the company mentioned in the title? | label_selection | True | N/A | [yes, no] |
| false_positive | marked as false positive | label_selection | True | N/A | [yes, no] |
-
建议(Suggestions):人类或机器生成的每个问题的推荐,以协助标注者在标注过程中,总是与现有问题相关联,并在名称后附加“-suggestion”和“-suggestion-metadata”,包含建议的值及其元数据。
-
元数据(Metadata):一个字典,用于提供有关数据记录的额外信息,可选,可以链接到
argilla.yaml中的metadata_properties。 -
指南(Guidelines):可选的纯字符串,用于向标注者提供指示。
数据实例
一个数据实例在Argilla中的示例如下:
json { "external_id": null, "fields": { "article_id": "6243969940", "content": "...", "org_found": "{"KONINKLIJKE PHILIPS NV": true}", "prod_status": "True", "title": "..." }, "metadata": {}, "responses": [ { "status": "submitted", "user_id": "325f12f3-eb5f-44f1-85fb-7d270a4708b1", "values": { "false_positive": { "value": "yes" }, "relevant_company": { "value": "no" } } } ], "suggestions": [ { "agent": null, "question_name": "false_positive", "score": 0.9159483630753849, "type": null, "value": "no" } ], "vectors": {} }
在HuggingFace datasets中的相同记录如下:
json { "article_id": "6243969940", "content": "...", "org_found": "{"KONINKLIJKE PHILIPS NV": true}", "prod_status": "True", "title": "..." }



