遇见数据集

ChartSync

收藏
Hugging Face2026-07-18 更新2026-07-19 收录
官方服务:

资源简介:

ChartSync是一个用于评估统计图表图像中视觉逻辑级联编辑(VLCE)的基准数据集,旨在支持图表理解、图表编辑和视觉逻辑推理任务。该数据集包含870个经过专家验证的编辑三元组,涵盖9种图表类别和4种任务类型,其中包括235个几何耦合的VLCE实例,数据规模在1千到1万之间。数据集结构包括基准注释文件(chartsync_benchmark.json),其中包含源图表元数据、编辑指令、任务类型标签以及对应图像和代码文件的路径;原始统计图表图像目录(images/);专家验证的编辑后图表图像目录(edited_images/);用于生成原始图表的Python脚本目录(py/);以及用于生成编辑后图表的Python脚本目录(edited_py/)。数据集通过质量控制的注释流程构建,包括语义指令合成、代码驱动图表生成和专家质量保证。它支持使用OCR F1、SSIM、TESR、VLCS和BFS等感知、文本和逻辑指标进行评估,适用于图像到文本、文本到图像和图像到图像等任务,可用于基准测试和研究。数据集以CC BY 4.0许可发布。

ChartSync is a benchmark dataset for evaluating Visual Logic Cascaded Editing (VLCE) on statistical chart images, designed to support chart understanding, chart editing, and visual logic reasoning tasks. This dataset contains 870 expert-validated editing triplets, covering 9 chart categories and 4 task types, among which there are 235 geometrically coupled VLCE instances, with a data scale ranging from 1,000 to 10,000. The dataset structure includes the benchmark annotation file (chartsync_benchmark.json), which contains source chart metadata, editing instructions, task type tags, and the paths of corresponding image and code files; the original statistical chart image directory (images/); the expert-validated edited chart image directory (edited_images/); the Python script directory for generating original charts (py/); and the Python script directory for generating edited charts (edited_py/). The dataset is constructed through a quality-controlled annotation workflow, including semantic instruction synthesis, code-driven chart generation, and expert quality assurance. It supports evaluation using perceptual, textual, and logical metrics such as OCR F1, SSIM, TESR, VLCS, and BFS, and is applicable to tasks including image-to-text, text-to-image, and image-to-image, which can be used for benchmarking and research. The dataset is released under the CC BY 4.0 license.

创建时间:
2026-07-11
原始信息汇总

数据集概述

ChartSync 是一个用于评估统计图表图像中 视觉-逻辑级联编辑(VLCE) 的基准数据集,随论文《ChartSync: A Benchmark for Visuo-Logical Cascading Chart Editing》(arXiv:2607.10301)发布。官方代码库位于 kaka-yjk/ChartSyncCodebase


数据集规模

  • 编辑三元组:870个(经专家验证)
  • 图表类别:9种
  • 任务类型:4种
  • 几何耦合 VLCE 实例:235个

数据集结构

数据集包含以下文件和目录:

  • chartsync_benchmark.json:基准注释文件,包含源图表元数据、编辑指令、任务类型标签,以及对应图像和代码文件的路径。
  • images/:原始统计图表图像。
  • edited_images/:经专家验证的编辑后图表图像。
  • py/:用于生成原始图表的 Python 脚本。
  • edited_py/:用于生成编辑后图表的 Python 脚本。

注意:本地 OCR 和锚点缓存不包含在公开发布中。


注释流程

ChartSync 通过质量控制注释和验证流程构建:

  1. 语义指令合成:编辑指令设计为需要图表图像中语义、视觉和逻辑的协调变化。
  2. 代码驱动的图表生成:原始图表和编辑后图表均通过成对的 Python 图表脚本生成,确保可复现性和精确的视觉控制。
  3. 专家质量保证:所有编辑三元组均经过手动检查,以验证指令对齐、图表有效性和编辑正确性。

评估指标

ChartSync 支持以下互补的感知、文本和逻辑指标:

  • OCR F1:光学字符识别的 F1 分数
  • SSIM:结构相似性指数
  • TESR:文本编辑成功率
  • VLCS:视觉-逻辑级联得分
  • BFS:广度优先搜索(用于逻辑一致性评估)

使用示例

可从 chartsync_benchmark.json 直接加载基准注释: python import json from pathlib import Path

dataset_dir = Path("ChartSync") annotation_path = dataset_dir / "chartsync_benchmark.json"

with annotation_path.open("r", encoding="utf-8") as f: records = json.load(f)

first = records[0] print(first)

从 Hugging Face 下载后,请将 dataset_dir 替换为本地数据集路径。


引用

bibtex @article{yu2026chartsync, title={ChartSync: A Benchmark for Visuo-Logical Cascading Chart Editing}, author={Yu, Jiakang and Chai, Yixuan and Wang, Tianci and Jin, Rihui and Xu, Guangkai and Deng, Hongtao and Zhu, Xun and Gao, Wang and Guo, Xinrun and Wu, Haipang}, journal={arXiv preprint arXiv:2607.10301}, year={2026} }


许可协议

ChartSync 采用 Creative Commons Attribution 4.0 International License (CC BY 4.0) 发布。

搜集汇总
数据集介绍
ChartSync 数据集图片
构建方式
ChartSync数据集的构建依托于一套严谨的标注与验证流程。首先,通过语义指令合成环节,精心设计需要协调语义、视觉与逻辑多重维度的编辑指令。随后,借助配对Python图表脚本驱动原始图表与编辑后图表的生成,确保过程的可复现性与视觉控制的精准性。最后,由领域专家对所有编辑三元组进行人工质量审核,逐一验证指令对齐度、图表有效性及编辑正确性,从而构建出包含870个经专家验证的编辑三元组的数据集。
使用方法
ChartSync的使用方式简洁直观。研究者可直接从`chartsync_benchmark.json`文件中加载标注数据,该文件包含源图表元数据、编辑指令、任务类型标签及对应图像与代码文件的路径。配合`images/`与`edited_images/`目录下的原始与编辑后图表图像,以及`py/`与`edited_py/`中的Python生成脚本,用户可便捷地复现编辑流程或进行模型评估。数据集遵守CC BY 4.0许可,便于学术社区广泛采用与二次研究。
背景与挑战
背景概述
ChartSync是一个面向统计图表图像的视-逻辑级联编辑(VLCE)评估基准,由Ji-kang Yu、Yixuan Chai等研究人员于2026年提出,相关论文发布于arXiv。随着视觉语言模型在图理解领域的兴起,现有基准多聚焦于图表问答或简单属性修改,缺乏对需同时协调语义、视觉与逻辑层面变更的级联编辑能力的系统评测。ChartSync专门针对这一空白,通过精心设计的870组专家验证编辑三元组,涵盖9种图表类别与4类任务,旨在检验模型在复杂图表编辑中实现视觉与逻辑一致性对齐的核心能力,为图表智能领域构建了不可或缺的评估基石。
当前挑战
ChartSync所应对的核心领域挑战在于:现有图表理解基准难以衡量模型在执行跨模态、跨属性的级联编辑时所需的逻辑推理与视觉协调能力,例如修改数据标签需同步更新对应图形元素的几何位置与视觉属性。构建过程中面临的困难包括:如何设计语义上要求视-逻辑联动的编辑指令,以避免简单属性替换;如何通过代码驱动方式精确生成原始与编辑后图表,确保可视化结果的可复现性与细粒度控制;以及如何组织专家验证流程以严格校验每对编辑三元组的指令对齐度、图表有效性与编辑正确性,从而保证基准的高质量与可靠性。
常用场景
经典使用场景
ChartSync数据集专注于统计图表图像中视觉-逻辑级联编辑(Visuo-Logical Cascading Editing, VLCE)任务的评估。其经典使用场景涵盖图表理解与编辑的联合推理,具体包括基于自然语言指令对图表进行语义层面(如数据属性调整)、视觉层面(如颜色与布局变化)以及逻辑层面(如坐标轴尺度重构)的协同修改。该数据集提供了870组经专家验证的编辑三元组,覆盖九种图表类别与四种任务类型,为多模态大语言模型在图表编辑任务上的性能评测提供了标准化基准。研究者可借助该数据集精确衡量模型在感知、文本与逻辑维度上的综合表现,从而推动图表智能处理技术的纵深发展。
解决学术问题
该数据集有效解决了学术界在图表编辑领域面临的几个关键问题。其一,填补了现有基准测试中缺乏以图表编辑为核心任务的空白,特别是那些需要视觉与逻辑协同调整的复杂指令场景。其二,提供了235组几何耦合的VLCE实例,专门用于评估模型在图表结构保持与精准修改之间的平衡能力。其三,通过引入多维评估指标(如OCR F1、SSIM、VLCS等),改变了以往仅依赖单一文本相似度或图像保真度指标的评估体系。ChartSync的提出极大推动了图表理解研究从被动问答向主动编辑与推理的方向演进,树立了该子领域的关键评估框架。
实际应用
在实际应用中,ChartSync所定义的VLCE任务具有广泛的产业价值。其最直接的应用场景包括自动化数据报告生成工具,如根据用户自然语言描述动态调整统计图表中的数值、标签或样式。此外,在商业智能(BI)平台中,ChartSync可用于增强图表编辑器的智能性与交互性,使用户无需手动操作即可实现复杂图表修改。教育领域同样受益良多,例如在数据分析教学场景中,模型可依据学习者指令实时生成修改后的图表以展示数据变换过程。该数据集还为自动海报生成、科学论文图表润色等任务提供了能力支撑,展现出从学术基准向实用软件转化的巨大潜力。
数据集最近研究
最新研究方向
ChartSync基准数据集聚焦于统计图表图像中的视觉-逻辑级联编辑(VLCE)这一前沿方向,通过870个经专家验证的编辑三元组、9种图表类别及4种任务类型,系统评估多模态大模型在图表理解与编辑中的语义一致性、视觉保真度与逻辑连贯性。该研究呼应了当前AI领域对复杂视觉推理与精准编辑能力的迫切需求,特别是在自动化数据可视化、智能报告生成与交互式图表修正等热点应用场景中,为衡量模型突破浅层视觉感知、实现深层逻辑操控提供了关键基准,推动了图表智能处理从描述性分析向可执行编辑的范式跃迁。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务