遇见数据集

adaption-charts-p2-gold

收藏
Hugging Face2026-08-02 更新2026-08-03 收录
官方服务:

资源简介:

Adaption Charts P2 — Gold Chart-QA 是一个高质量的图表问答数据集,专为 Adaption Labs AutoScientist 挑战赛(第二部分,数据可视化赛道)构建。数据集包含两部分来源:程序化生成的合成核心(正确性由构造保证)和基于真实公共仪表板与报告手工编写的硬集。总计1100条样本,其中1002条为合成数据,98条为硬集数据。每条样本包含11个字段:file_name(图表PNG路径)、id(唯一ID)、source(synthetic或hardset)、question(问题)、answer(答案)、chart_type(图表类型,共7种:bar、line、grouped_bar、stacked_bar、pie、donut、mixed)、task_type(任务类型,共10种:lookup_value、delta_absolute、max_min、rank_order、compare_categories、aggregation_sum_avg、multi_series_compare、trend_direction、percent_change_ratio、hard_multi_step)、difficulty(难度:easy、medium、hard)、verified(布尔值,所有行均为true)、split(全部为train)、notes(出处/归属/生成器注释)。所有样本均经过验证:合成数据基于确定性种子预计算答案,保证正确;硬集数据由人工逐条审核,确保答案可从图表图像中独立得出。数据集覆盖英语,领域包括商业、金融、健康、政策等。适用于微调多模态图表问答模型、图表理解基准测试、图表类型或任务类型的消融研究。已知限制包括仅英语、合成图表风格统一、硬集偏向max_min和lookup_value、mixed图表仅存在于硬集、本文件不含验证/测试集。数据集采用CC-BY-4.0许可。

Adaption Charts P2 — Gold Chart-QA is a high-quality chart question answering dataset constructed for the Adaption Labs AutoScientist Challenge (Part 2, Data Visualization Track). The dataset comprises two sources: a programmatically generated synthetic core (with correctness guaranteed by its construction method) and a hardset manually crafted based on real-world public dashboards and reports. In total, there are 1100 samples, including 1002 synthetic samples and 98 hardset samples. Each sample contains 11 fields: 1. `file_name`: File path to the chart PNG image 2. `id`: Unique sample ID 3. `source`: Indicates the sample origin, either `synthetic` or `hardset` 4. `question`: The question text for the chart 5. `answer`: The correct answer to the corresponding question 6. `chart_type`: Chart type, with 7 supported categories: bar, line, grouped_bar, stacked_bar, pie, donut, mixed 7. `task_type`: Task type, with 10 supported categories: lookup_value, delta_absolute, max_min, rank_order, compare_categories, aggregation_sum_avg, multi_series_compare, trend_direction, percent_change_ratio, hard_multi_step 8. `difficulty`: Difficulty level, with three options: easy, medium, hard 9. `verified`: Boolean value, all entries are set to `true` 10. `split`: All entries are set to `train` 11. `notes`: Provenance, attribution or generator annotations All samples have undergone verification: synthetic data precomputes answers based on deterministic seeds to ensure full correctness; hardset data has been manually reviewed item-by-item to confirm that answers can be independently derived from the chart images. The dataset covers English language, with application domains including business, finance, healthcare, policy and others. It is applicable for fine-tuning multimodal chart question answering models, chart understanding benchmark testing, and ablation studies on chart types or task types. Known limitations include: only supporting English, uniform style of synthetic charts, hardset samples being biased towards max_min and lookup_value tasks, mixed charts only existing in the hardset, and this file does not contain validation or test splits. The dataset is licensed under CC-BY-4.0.

创建时间:
2026-08-02
原始信息汇总

数据集概述

Adaption Charts P2 — Gold Chart-QA 是一个面向图表问答(Chart-QA)任务的高质量数据集,专为 Adaption Labs AutoScientist Challenge(第二部分:数据可视化赛道)构建。数据集包含程序化生成的合成数据和人工编写的高难度数据两部分。

基本信息

  • 总行数:1415 行(其中合成数据 1317 行,人工高难度数据 98 行)
  • 图表类型:7 种,包括柱状图、折线图、分组柱状图、堆叠柱状图、饼图、环形图和混合图
  • 任务类型:10 种,包括查找数值、绝对增量、最大/最小、排名顺序、类别比较、聚合求和/平均、多系列比较、趋势方向、百分比变化比率、硬性多步推理
  • 难度分级:简单、中等、困难
  • 语言:仅英语
  • 领域:商业、金融、健康、政策
  • 验证状态:所有行 verified=true
  • 许可证:CC-BY-4.0

数据构成

按来源

来源 行数 占比
合成数据 1317 93.1%
人工高难度数据 98 6.9%

按图表类型

图表类型 行数
柱状图 (bar) 417
折线图 (line) 288
分组柱状图 (grouped_bar) 201
堆叠柱状图 (stacked_bar) 184
饼图 (pie) 155
混合图 (mixed) 104
环形图 (donut) 66

按任务类型

任务类型 行数
最大/最小 (max_min) 301
查找数值 (lookup_value) 273
绝对增量 (delta_absolute) 156
排名顺序 (rank_order) 141
类别比较 (compare_categories) 131
趋势方向 (trend_direction) 124
多系列比较 (multi_series_compare) 111
聚合求和/平均 (aggregation_sum_avg) 89
百分比变化比率 (percent_change_ratio) 56
硬性多步推理 (hard_multi_step) 33

按难度

难度 行数
中等 726
困难 358
简单 331

数据模式(Schema)

每行包含以下字段:

  • file_name:图表 PNG 的图像路径
  • id:唯一行 ID(如 syn_bar_0001__q1hs_0007__q3
  • source:来源类型(synthetichardset
  • question:简短的问题文本
  • answer:简短精确的答案(如数字、类别名称、百分比等)
  • chart_type:图表类型(7 种枚举值之一)
  • task_type:任务类型(10 种枚举值之一)
  • difficulty:难度等级(easymediumhard
  • verified:验证状态(所有行均为 true
  • split:数据划分(所有行均为 train
  • notes:来源归属/生成器备注

验证协议

  • 合成数据:通过可复现的种子随机生成图表,答案在图表绘制前根据底层数值直接计算得出,无需视觉估计,构造即正确。
  • 人工高难度数据:每行由真实图表截图人工逐条编写,并逐行对照源图审查后才记录答案,所有问题均可仅凭图像回答。

人工数据来源

人工高难度数据来源于以下公开机构图表截图:

来源 行数 许可说明
加拿大统计局 (StatCan) 24 开放许可协议
美国劳工统计局 (BLS) 29 美国政府作品,公共领域
欧洲中央银行 (ECB) 18 允许复制并注明出处
世界卫生组织 (WHO) 21 参见归属说明
加拿大银行 (BoC) 2 开放许可
气候政策数据库 4 CC-BY-4.0

注意:WHO 源材料通常采用 CC-BY-NC-SA-3.0 IGO 许可,本数据集以视觉-语言模型训练的转化性目的使用 WHO 图表截图,并保留完整归属。对于商业用途有顾虑的用户,应筛选并单独处理 notes 字段以 hardset; WHO; 开头的行。

预期用途

  • 微调多模态图表问答模型
  • 短答案图表理解基准测试
  • 图表类型或任务类型覆盖度的消融研究

不适合需要高精度 OCR 或从密集财务表格中精确提取数字的下游任务——本数据集专注于图表推理,而非精确数字提取。

已知局限性

  • 仅英语
  • 合成数据外观统一:所有合成行使用相同的 matplotlib 渲染器和一致风格,真实世界的视觉多样性完全来自人工高难度数据
  • 人工高难度数据偏向 max_minlookup_value:真实仪表盘天然支持这些任务,虽通过平衡步骤大幅削减合成数据中的 max_min 以补偿,但人工数据的结构性偏差仍然存在
  • chart_type=mixed 仅出现在人工数据中:合成数据不生成多面板仪表盘,混合图对视觉语言模型而言视觉难度更高
  • 本文件无保留验证/测试集:外部评估切片(源自 ChartQAPro)有意置于数据集之外

引用

如需使用本数据集,请引用:

@misc{anbalagan2026adaptioncharts, title = {Adaption Charts P2: A Small Gold Chart-QA Dataset}, author = {Anbalagan, Vinod}, year = {2026}, howpublished = {url{https://huggingface.co/datasets/vinod-anbalagan/adaption-charts-p2-gold}} }

同时请根据实际情况注明"数据来源"部分所列上游图表来源。

搜集汇总
数据集介绍
adaption-charts-p2-gold 数据集图片
构建方式
该数据集采用双源混合构建策略,以程序化合成数据为核心,辅以人工编纂的困难样本集。合成部分通过种子化伪随机分布生成图表底层数值,所有问答对均在图像渲染前由精确计算得出,实现构造即正确的验证逻辑;困难集则从加拿大统计局、美国劳工统计局、欧洲央行等权威机构公开发布的图表中逐一手工截取、命题与复核,确保每道题目仅凭图像本身即可作答。两类数据均经严格校验,全量标注验证状态为真,形成兼具规模与质量的图表问答资源。
特点
数据集以感知难度为差异化核心,而非单纯增加算术步骤。其涵盖七种图表类型与十类任务类型,其中包括截断坐标轴、无标注、近似平局、相似色系、密集类别、遮挡图例、对数刻度及双轴等八种感知挑战机制,迫使模型真正读取坐标而非依赖像素估测。全部数据以英文呈现,覆盖商业、金融、卫生与政策等领域,合成部分风格统一,困难集则注入真实世界的视觉多样性。任务分布经平衡处理,困难样本附带机制说明与来源注释。
使用方法
该数据集主要服务于多模态图表问答模型的微调与短答案理解基准测试,亦适用于图表类型或任务类型的消融研究。使用时可直接加载图像文件夹路径与对应问答标注,针对合成与困难两个来源可分别评估模型在规则化与真实场景下的表现。需留意其不适用于需要高保真光学字符识别或密集财务表格精确数字提取的任务,且由于世界卫生组织来源材料附带非商业性许可限制,下游商业应用应筛选并单独处理相关注释行。
背景与挑战
背景概述
图表问答任务旨在使模型理解可视化信息并回答自然语言问题,是跨模态推理的关键环节。Adaption Charts P2 — Gold Chart-QA数据集由Vinod Anbalagan于2026年构建,服务于Adaption Labs AutoScientist挑战赛(第二部分,数据可视化赛道)。该数据集包含3803个经校验的样本,涵盖7种图表类型与10种任务类型,聚焦真实商业、金融、健康与政策领域。其核心研究问题在于突破视觉语言模型在图表数值读取与推理中的感知瓶颈,并凭借高质量、全验证的构造为多模态图表问答微调与基准评测提供了可靠资源,推动了该领域向感知挑战导向的评估范式发展。
当前挑战
图表问答领域的核心挑战在于模型需同时解决视觉感知与逻辑推理问题,而现有数据集常偏重算术步骤,忽视了视觉读取本身的困难。该数据集面临两方面挑战:其一,领域问题要求模型克服截断轴、无标签、近值、相似色、多类别、拥挤图例、对数轴和双轴等八种感知难度机制,这些机制导致基于像素比较的模型易产生错误;其二,构建过程中需确保合成样本在无标签条件下答案的构造正确性,并对手工收集的真实公共仪表盘截图进行逐行人工校验与归属说明,同时平衡来源偏差,避免因合成风格单一或硬集偏向特定任务类型而影响泛化能力。
常用场景
经典使用场景
图表问答(Chart-QA)作为多模态理解的关键任务,旨在让模型从可视化图表中读取信息并进行推理作答。该数据集最经典的使用场景是微调与评估视觉语言模型(VLM)在真实商业、金融、健康与政策领域的图表理解能力,覆盖条形图、折线图、分组条形图、堆叠条形图、饼图、环形图及混合图七类图表,并系统组织查找数值、极值比较、排序、趋势判断、百分比变化与多步推理等十种任务类型,从而全面检验模型对图表布局、图例、坐标轴与数据标签的联合解析水平。
衍生相关工作
围绕该数据集衍生的经典工作主要涵盖多模态图表问答模型的微调与消融研究,包括针对不同图表类型与任务类型覆盖度的系统性评测,以及感知难度机制对模型性能影响的实证分析。该数据集还催生了与ChartQA、PlotQA、ChartQAPro等基准的对比研究,推动了图表理解评测体系的细化,并激励后续工作探索混合图表与多面板仪表盘的推理能力,为视觉语言模型在数据可视化领域的持续演进提供了可复用的数据基础与方法论参考。
数据集最近研究
最新研究方向
在视觉语言模型蓬勃发展的当下,图表问答作为多模态推理的关键试金石,正从简单的数值查找向深层次感知与逻辑推理演进。adaption-charts-p2-gold数据集直面当前基准的痛点——即模型擅长算术却拙于读取——通过截断坐标轴、近值平局、相似色系、拥挤图例等八种感知难度机制,构建了以感知挑战为核心的正确性可验证的评测框架。该数据集融合程序化生成与真实仪表板人工标注,覆盖七类图表与十种任务,为模型鲁棒性研究提供了细粒度诊断工具。其前沿方向在于推动多模态模型从模式匹配转向真正的图表理解,对金融、健康、政策等高风险领域的自动化决策具有深远意义,亦为ChartQA等基准的感知维度补足了关键拼图。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务