five

image-preferences|图像处理数据集|机器学习数据集

收藏
huggingface2024-11-22 更新2024-12-12 收录
图像处理
机器学习
下载链接:
https://huggingface.co/datasets/data-is-better-together/image-preferences
下载链接
链接失效反馈
资源简介:
该数据集包含多个文本和图像特征,用于训练和评估模型。数据集分为训练集和清理后的数据集,分别包含14587和12752个样本。数据集的总下载大小为36164293205字节,总数据集大小为35958306699.51442字节。
创建时间:
2024-11-22
原始信息汇总

数据集概述

数据集信息

  • 特征:
    • quality_prompt: 字符串
    • category: 字符串
    • subcategory: 字符串
    • style_prompt: 字符串
    • simplified_prompt: 字符串
    • __index_level_0__: 整数
    • grouped_model_name: 字符串序列
    • prompt: 字符串
    • distilabel_metadata: 结构体
      • raw_input_image_gen_quality_dev: 结构体
        • prompt: 字符串
      • raw_input_image_gen_quality_sd: 结构体
        • prompt: 字符串
      • raw_input_image_gen_simplified_dev: 结构体
        • prompt: 字符串
      • raw_input_image_gen_simplified_sd: 结构体
        • prompt: 字符串
      • raw_output_image_gen_quality_dev: 结构体
        • image: 字符串
      • raw_output_image_gen_quality_sd: 结构体
        • image: 字符串
      • raw_output_image_gen_simplified_dev: 结构体
        • image: 字符串
      • raw_output_image_gen_simplified_sd: 结构体
        • image: 字符串
    • image_quality_dev: 图像
    • image_simplified_dev: 图像
    • image_quality_sd: 图像
    • image_simplified_sd: 图像

数据集分割

  • train:
    • 样本数: 14587
    • 字节数: 19166570224.552002
  • cleaned:
    • 样本数: 12752
    • 字节数: 16791736474.962416

数据集大小

  • 下载大小: 36164293205
  • 数据集大小: 35958306699.51442

配置

  • config_name: default
    • 数据文件:
      • train: data/train-*
      • cleaned: data/cleaned-*
AI搜集汇总
数据集介绍
main_image_url
构建方式
Open Image Preferences数据集的构建过程基于文本到图像生成模型的性能评估需求。通过从fal/imgsys-results数据集中提取提示词,这些提示词根据复杂性和质量进行了优化,涵盖了多种图像类别。随后,社区成员被邀请对每个提示词生成的两张图像进行偏好标注,最终形成了包含10,000对偏好标注的数据集。
特点
该数据集的特点在于其多样性和广泛性,涵盖了从动漫风格到像素艺术等多种图像类别。每个提示词都经过精心设计,以确保其复杂性和质量能够充分测试图像生成模型的性能。此外,数据集中的每对图像都经过社区成员的偏好标注,确保了数据的可靠性和实用性。
使用方法
Open Image Preferences数据集主要用于评估和比较不同文本到图像生成模型的性能。研究人员可以通过分析社区成员对不同生成图像的偏好,了解模型在生成复杂和高质量图像方面的表现。此外,该数据集还可用于训练和优化图像生成模型,提升其在多样化图像类别中的生成能力。
背景与挑战
背景概述
Open Image Preferences数据集由data-is-better-together团队于近期发布,旨在为文本到图像生成模型的性能评估提供高质量的偏好对数据。该数据集的核心研究问题在于如何通过多样化的文本提示生成图像,并基于社区标注的偏好对来评估不同模型的生成效果。数据集涵盖了广泛的图像类别和风格,包括动漫、像素艺术等,为图像生成领域的研究提供了丰富的实验数据。其发布不仅推动了文本到图像生成技术的发展,还为模型优化和评估提供了新的基准。
当前挑战
Open Image Preferences数据集在构建过程中面临多重挑战。首先,文本提示的多样性和复杂性要求生成模型能够处理不同难度级别的任务,这对模型的泛化能力提出了较高要求。其次,社区标注的偏好对需要确保一致性和准确性,以避免主观偏差对评估结果的影响。此外,数据集的规模和质量控制也是一个关键问题,如何在保证数据多样性的同时,确保每个偏好对的标注质量,是构建过程中的一大难题。这些挑战不仅影响了数据集的构建效率,也对后续模型评估的可靠性提出了更高的要求。
常用场景
经典使用场景
在图像生成模型的评估与优化中,Open Image Preferences数据集通过提供大量文本到图像的偏好对,成为研究者在模型性能比较和用户偏好分析中的关键工具。该数据集广泛应用于生成模型的质量评估,特别是在不同难度和风格的图像生成任务中,为模型调优提供了丰富的参考数据。
解决学术问题
Open Image Preferences数据集解决了图像生成模型在多样性和质量评估中的难题。通过提供基于用户偏好的标注数据,研究者能够更准确地评估模型在不同类别和风格下的表现,从而推动生成模型在复杂场景下的性能提升。该数据集为图像生成领域的研究提供了重要的数据支持,促进了模型优化和算法改进。
衍生相关工作
基于Open Image Preferences数据集,许多经典研究工作得以展开。例如,研究者利用该数据集开发了更精准的图像生成模型评估方法,并提出了基于用户偏好的模型优化策略。此外,该数据集还推动了文本到图像生成领域的新算法研究,如多模态生成模型和个性化生成系统的开发,为相关领域的研究提供了重要的数据支持。
以上内容由AI搜集并总结生成
用户留言
有没有相关的论文或文献参考?
这个数据集是基于什么背景创建的?
数据集的作者是谁?
能帮我联系到这个数据集的作者吗?
这个数据集如何下载?
点击留言
数据主题
具身智能
数据集  4098个
机构  8个
大模型
数据集  439个
机构  10个
无人机
数据集  37个
机构  6个
指令微调
数据集  36个
机构  6个
蛋白质结构
数据集  50个
机构  8个
空间智能
数据集  21个
机构  5个
5,000+
优质数据集
54 个
任务类型
进入经典数据集
热门数据集

中国交通事故深度调查(CIDAS)数据集

交通事故深度调查数据通过采用科学系统方法现场调查中国道路上实际发生交通事故相关的道路环境、道路交通行为、车辆损坏、人员损伤信息,以探究碰撞事故中车损和人伤机理。目前已积累深度调查事故10000余例,单个案例信息包含人、车 、路和环境多维信息组成的3000多个字段。该数据集可作为深入分析中国道路交通事故工况特征,探索事故预防和损伤防护措施的关键数据源,为制定汽车安全法规和标准、完善汽车测评试验规程、

北方大数据交易中心 收录

学生课堂行为数据集 (SCB-dataset3)

学生课堂行为数据集(SCB-dataset3)由成都东软学院创建,包含5686张图像和45578个标签,重点关注六种行为:举手、阅读、写作、使用手机、低头和趴桌。数据集覆盖从幼儿园到大学的不同场景,通过YOLOv5、YOLOv7和YOLOv8算法评估,平均精度达到80.3%。该数据集旨在为学生行为检测研究提供坚实基础,解决教育领域中学生行为数据集的缺乏问题。

arXiv 收录

PCLT20K

PCLT20K数据集是由湖南大学等机构创建的一个大规模PET-CT肺癌肿瘤分割数据集,包含来自605名患者的21,930对PET-CT图像,所有图像都带有高质量的像素级肿瘤区域标注。该数据集旨在促进医学图像分割研究,特别是在PET-CT图像中肺癌肿瘤的分割任务。

arXiv 收录

HyperGlobal-450K - 全球最大规模高光谱图像数据集

HyperGlobal-450K数据集由武汉大学联合国内外多所知名高校及研究机构共同构建,是迄今为止全球规模最大的高光谱图像数据集。该数据集包含约45万张高光谱图像,规模等价于超过2000万张不重叠的三波段图像,远超现有的同类数据集。数据集涵盖了全球范围内的高光谱遥感图像,包括来自地球观测一号(EO-1)Hyperion和高分五号(GF-5B)两种传感器的图像,光谱范围从可见光到短波及中波红外,具有从紫外到长波红外的330个光谱波段,空间分辨率为30米。每幅图像经过精心处理,去除了无效波段和水汽吸收波段,保留了具有实际应用价值的光谱信息。HyperGlobal-450K数据集不仅支持高光谱图像的基础研究,还能够用于开发和测试各种高光谱图像处理方法,比如图像分类、目标检测、异常检测、变化检测、光谱解混、图像去噪和超分辨率等任务。

github 收录

中国区域地面气象要素驱动数据集 v2.0(1951-2020)

中国区域地面气象要素驱动数据集(China Meteorological Forcing Data,以下简称 CMFD)是为支撑中国区域陆面、水文、生态等领域研究而研发的一套高精度、高分辨率、长时间序列数据产品。本页面发布的 CMFD 2.0 包含了近地面气温、气压、比湿、全风速、向下短波辐射通量、向下长波辐射通量、降水率等气象要素,时间分辨率为 3 小时,水平空间分辨率为 0.1°,时间长度为 70 年(1951~2020 年),覆盖了 70°E~140°E,15°N~55°N 空间范围内的陆地区域。CMFD 2.0 融合了欧洲中期天气预报中心 ERA5 再分析数据与气象台站观测数据,并在辐射、降水数据产品中集成了采用人工智能技术制作的 ISCCP-ITP-CNN 和 TPHiPr 数据产品,其数据精度较 CMFD 的上一代产品有显著提升。 CMFD 历经十余年的发展,其间发布了多个重要版本。2019 年发布的 CMFD 1.6 是完全采用传统数据融合技术制作的最后一个 CMFD 版本,而本次发布的 CMFD 2.0 则是 CMFD 转向人工智能技术制作的首个版本。此版本与 1.6 版具有相同的时空分辨率和基础变量集,但在其它诸多方面存在大幅改进。除集成了采用人工智能技术制作的辐射和降水数据外,在制作 CMFD 2.0 的过程中,研发团队尽可能采用单一来源的再分析数据作为输入并引入气象台站迁址信息,显著缓解了 CMFD 1.6 中因多源数据拼接和气象台站迁址而产生的虚假气候突变。同时,CMFD 2.0 数据的时间长度从 CMFD 1.6 的 40 年大幅扩展到了 70 年,并将继续向后延伸。CMFD 2.0 的网格空间范围虽然与 CMFD 1.6 相同,但其有效数据扩展到了中国之外,能够更好地支持跨境区域研究。为方便用户使用,CMFD 2.0 还在基础变量集之外提供了若干衍生变量,包括近地面相对湿度、雨雪分离降水产品等。此外,CMFD 2.0 摒弃了 CMFD 1.6 中通过 scale_factor 和 add_offset 参数将实型数据化为整型数据的压缩技术,转而直接将实型数据压缩存储于 NetCDF4 格式文件中,从而消除了用户使用数据时进行解压换算的困扰。 本数据集原定版本号为 1.7,但鉴于本数据集从输入数据到研制技术都较上一代数据产品有了大幅的改变,故将其版本号重新定义为 2.0。CMFD 2.0 的数据内容与此前宣传的 CMFD 1.7 基本一致,仅对 1983 年 7 月以后的向下短/长波辐射通量数据进行了更新,以修正其长期趋势存在的问题。2021 年至 2024 年的 CMFD 数据正在制作中,计划于 2025 年上半年发布,从而使 CMFD 2.0 延伸至 2024 年底。

国家青藏高原科学数据中心 收录