meituan-longcat/CEdit-Bench

--- license: mit task_categories: - image-to-image language: - en - zh pretty_name: CEdit-Bench size_categories: - 1K<n<10K --- **CEdit-Bench** is a comprehensive evaluation suite, first proposed in the **LongCat-Image technical report**, and developed by integrating and extending existing image editing benchmarks. We further curate new data to enhance task diversity, yielding a robust dataset of 1,464 bilingual (Chinese–English) editing pairs across 15 fine-grained task categories, providing a more holistic and rigorous standard for evaluating image editing models. <div align="center"> <img src="assets/data_distribution.jpg" width="75%" alt="data distribution." /> </div> An example entry is shown below: ``` { "key": "730fc5ea-7c14-45c9-a2a8-8d802b49a610", "input_image": bytes, "instruction_en": "Adjust the background to a garden", "instruction_cn": "将背景调整为花园", "task_type": "Background Change" } ```许可证：MIT协议 task_categories: - 图像到图像（image-to-image） language: - 英语 - 中文 pretty_name: CEdit-Bench size_categories: - 1000 < 样本数 < 10000 **CEdit-Bench**是一款综合性图像编辑评测套件，首次提出于《LongCat-Image技术报告》，通过整合并拓展现有图像编辑基准数据集开发而成。我们进一步精选新增数据以丰富任务多样性，最终构建出涵盖15个细粒度任务类别、共计1464组中英双语编辑样本对的高质量数据集，为图像编辑模型的评测提供了更全面且严谨的标准。 <div align="center"> <img src="assets/data_distribution.jpg" width="75%" alt="数据集分布" /> </div> 以下为一条示例条目： { "唯一标识": "730fc5ea-7c14-45c9-a2a8-8d802b49a610", "输入图像": 二进制字节流, "英文指令": "Adjust the background to a garden", "中文指令": "将背景调整为花园", "任务类型": "背景修改" }

搜集汇总

背景与挑战

背景概述

CEdit-Bench是一个综合的图像编辑评估数据集，包含1,464个双语（中英文）编辑对，覆盖15个细粒度的任务类别，如色调变换、背景更改和主题替换等，旨在为图像编辑模型提供全面且严谨的评估标准。该数据集通过整合现有基准并增加新数据来增强任务多样性，适用于图像到图像的多模态任务，支持英语和中文，采用Parquet格式，大小为1K-10K，许可证为MIT。