nowsyn/COCO-UM

`COCO-UM`数据集是一个用于评估多控制图像合成模型性能的基准数据集。数据集包含三个主要文件夹：`val2017`、`inpaint`和`mask`。`val2017`中的每张图像都选取了一个前景对象，并使用PowerPaint工具对背景进行了修复，修复后的结果存储在`inpaint`文件夹中，而对应的掩码存储在`mask`文件夹中。数据集的设计允许用户在进行多控制图像合成时，为前景对象提供一种或多种控制信号（如姿态或边缘检测），同时为背景区域提供其他控制信号（如深度或分割）。

The `COCO-UM` dataset is a benchmark for evaluating the performance of multi-control image synthesis models. The dataset consists of three main folders: `val2017`, `inpaint`, and `mask`. For each image in `val2017`, a foreground object is selected, and the background is inpainted using PowerPaint, with the inpainted results stored in the `inpaint` folder and the corresponding masks stored in the `mask` folder. The dataset is designed to allow users to provide one or more control signals (e.g., pose or canny) for the foreground object while utilizing other control signals (e.g., depth or segmentation) for the background region during multi-control image synthesis.

原始信息汇总

AnyControl 数据集概述

数据集结构

• COCO-UM
  • val2017: 包含原始图像。
  • inpaint: 包含使用PowerPaint进行背景修复后的图像。
  • mask: 包含用于前景对象的掩码图像。

数据集内容

• 对于val2017中的每张图像，选择一个对象作为前景对象，并生成相应的掩码和修复后的背景图像。
• 掩码图像存储在mask文件夹中，修复后的图像存储在inpaint文件夹中。

数据集用途

• 用于评估多控制信号下的图像合成模型性能。
• 可以为前景对象（掩码区域）提供一个或多个控制信号（如姿态或边缘检测），同时为背景区域（未掩码区域）提供其他控制信号（如深度或分割）。

许可证

• 数据集及其相关模型和资产均在Apache 2.0许可证下发布。

引用

• 如果该数据集对您的研究有帮助，请考虑引用以下BibTeX条目： bibtex @misc{sun2024anycontrol, title={AnyControl: Create your artwork with versatile control on text-to-image generation}, author={Sun, Yanan and Liu, Yanchen and Tang, Yinhao and Pei, Wenjie and Chen, Kai}, booktitle={ECCV}, year={2024} }