five

madebyollin/soa-aesthetic

收藏
Hugging Face2023-06-18 更新2024-03-04 收录
下载链接:
https://hf-mirror.com/datasets/madebyollin/soa-aesthetic
下载链接
链接失效反馈
官方服务:
资源简介:
该数据集是从Smithsonian Open Access中筛选出的约10万张视觉上有趣的图像的标题和URL的随机列表。数据集仅包含元数据,实际图像可以通过工具如img2dataset下载。

This dataset consists of a random list of titles and URLs for approximately 100,000 visually engaging images, selected from the Smithsonian Open Access platform. The dataset only contains metadata, and the original images can be downloaded via tools such as img2dataset.
提供机构:
madebyollin
原始信息汇总

数据集概述

数据集内容

  • 类型: 该数据集包含约100,000个视觉上吸引人的CC0图像的标题和URL列表。
  • 来源: 数据来源于Smithsonian Open Access
  • 内容格式: 数据集仅包含元数据,不包含实际图像文件。

使用方法

  • 图像下载: 用户可以使用工具img2dataset来下载实际图像。具体命令如下: bash img2dataset --url_list data --output_folder data_files --input_format "parquet" --output_format files --caption_col "text" --url_col "url" --image_size 256 --min_image_size 128 --resize_mode keep_ratio --resize_only_if_bigger true --processes_count 16 --thread_count 128

许可证

  • 授权: 数据集遵循CC0-1.0许可证。
搜集汇总
数据集介绍
main_image_url
构建方式
该数据集源自史密森尼开放获取计划(Smithsonian Open Access),通过对海量CC0(Creative Commons Zero)授权图像元数据进行精心筛选与重构而成。构建过程中,首先从史密森尼公开的元数据仓库中提取所有图像标题及URL,随后运用视觉质量评估算法,将其中约10万张在美学上具有显著吸引力的图像筛选出来,形成最终的数据集合。为确保数据分布的随机性与代表性,所有条目均经过随机打乱处理,避免了因原始排序可能引入的偏差。数据集仅包含元数据信息,不直接存储图像文件,这既降低了存储成本,又赋予了用户灵活选择下载工具与分辨率的自主权。
使用方法
使用本数据集时,用户需借助专门的图像下载工具(如img2dataset)来获取实际图像文件。推荐采用以下命令行操作:通过img2dataset指定元数据文件路径、输出文件夹、输入格式为parquet、输出格式为files,并设置文本列与URL列的名称。为适应不同应用场景,可调节图像尺寸参数(如目标尺寸256像素,最小尺寸128像素),并选择保持比例或仅放大策略。多进程与多线程设置(如进程数16、线程数128)能显著加速批量下载过程。下载完成后,图像文件将按元数据中的文本描述与URL一一对应存储,便于直接用于视觉模型训练或图像检索任务。
背景与挑战
背景概述
在视觉美学计算与图像质量评估领域,高质量、具有明确审美标注的图像数据集是推动模型发展的基石。由研究人员ollin于2023年创建并发布的madebyollin/soa-aesthetic数据集,源自史密森尼开放获取计划(Smithsonian Open Access),该计划汇集了全球顶尖博物馆与档案馆的公共领域数字资产。核心研究问题聚焦于如何从海量公域资源中筛选出具有高视觉吸引力的图像,并构建一个既符合学术规范又便于大规模训练的数据集。该数据集通过筛选约10万张CC0协议下的图像,为图像生成、风格迁移及审美评分模型提供了可靠的训练素材,其影响力体现在为低资源场景下的视觉美学研究提供了开源、可复现的基准,尤其适用于需要多样化、无版权争议图像的生成式AI与计算机视觉任务。
当前挑战
该数据集所解决的领域问题集中于视觉审美自动评估的样本稀缺性——现有审美数据集多依赖人工评分且规模有限,而本数据集通过自动化筛选策略从百万级公域图像中提取高审美样本,填补了大规模、开放许可审美数据集的空白。构建过程中面临的核心挑战包括:其一,原始史密森尼数据集的图像质量参差不齐,需设计鲁棒的视觉过滤算法以剔除模糊、低分辨率或主题无趣的样本;其二,审美标签的客观性难以保证,数据集依赖元数据而非人工标注,可能引入基于来源或主题的审美偏差;其三,图像下载环节需处理海量URL的时效性与版权合规性,需借助img2dataset等工具实现高效并发下载并确保CC0协议的一致性。
常用场景
经典使用场景
在视觉美学计算与图像质量评估领域,madebyollin/soa-aesthetic数据集为研究者提供了一扇通往审美智能计算的窗口。该数据集源自史密森尼开放获取项目,经过精心筛选保留了约10万张具有显著视觉吸引力的CC0图像,其核心使用场景在于训练和评估图像美学评分模型。研究者可借助这些标注了审美偏好的图像,构建能够模拟人类视觉审美的深度学习架构,从而在图像排序、自动策展和视觉内容推荐等任务中实现更贴近主观感知的量化判断。
解决学术问题
该数据集有效化解了计算机视觉领域长期存在的审美数据稀缺与版权壁垒难题。传统美学数据集往往受限于版权保护或样本规模不足,难以支撑大规模深度模型的泛化训练。soa-aesthetic通过整合CC0许可的高质量开放图像,为学术研究提供了可自由使用且具有审美多样性的标准化基准,助力研究者探索图像低级特征与高级审美感知之间的映射规律,推动了图像美学计算从经验规则向数据驱动范式的转型。
实际应用
在实际应用层面,该数据集为数字文化机构的智能化转型提供了关键技术支撑。博物馆和美术馆可利用基于soa-aesthetic训练的模型自动筛选展览藏品中的视觉亮点,优化数字展厅的展品排列逻辑;社交媒体平台可将其嵌入内容推荐系统,提升用户信息流中图像内容的审美吸引力;设计行业则能借助此类工具实现海量素材的快速美学分级,辅助创意工作者在视觉传达中做出更符合受众审美的决策。
数据集最近研究
最新研究方向
在数字人文与计算机视觉交叉领域,基于博物馆开放数据构建的高质量美学图像数据集正成为研究热点。madebyollin/soa-aesthetic数据集源自史密森尼学会的开放获取资源,通过筛选约10万张视觉上引人入胜的CC0图像,为AI美学评估、图像生成与风格迁移等前沿方向提供了纯净的元数据基础。当前研究聚焦于利用该数据集训练更细腻的审美偏好模型,探索文化遗产数字化中的视觉语义表征,并推动生成式AI在艺术创作中的可控性提升。这一资源不仅降低了版权壁垒,更促进了跨机构开放数据在AI驱动的人文研究中的规模化应用,对理解人类视觉审美机制与文化遗产的智能传播具有深远意义。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务