遇见数据集

CyberHarem/tougou_ai_idolmastercinderellagirls

收藏
Hugging Face2024-01-16 更新2024-03-04 收录
官方服务:

资源简介:

这是名为tougou_ai/東郷あい (THE iDOLM@STER: Cinderella Girls)的数据集,包含66张图片及其标签。图片从多个网站(如danbooru, pixiv, zerochan等)爬取,核心标签包括short_hair, black_hair, brown_eyes。数据集提供了不同尺寸处理后的数据包,并提供了使用Waifuc加载原始数据集的代码示例。此外,还展示了标签聚类结果的列表。

This is the dataset named tougou_ai/東郷あい (THE iDOLM@STER: Cinderella Girls), which consists of 66 images and their associated tags. The images were crawled from multiple websites including danbooru, pixiv, zerochan, and others. The core tags include short_hair, black_hair, and brown_eyes. The dataset provides packages processed in different sizes, along with code examples for loading the original dataset using Waifuc. Additionally, a list of tag clustering results is presented.

提供机构:
CyberHarem
原始信息汇总

数据集概述

数据集信息

  • 名称: tougou_ai/東郷あい (THE iDOLM@STER: Cinderella Girls)
  • 包含内容: 66张图像及其标签
  • 核心标签: short_hair, black_hair, brown_eyes

数据集包列表

名称 图像数量 大小 类型 描述
raw 66 50.55 MiB Waifuc-Raw 包含元信息的原始数据(如果较大,最小边对齐到1400)
800 66 39.77 MiB IMG+TXT 短边不超过800像素的数据集
stage3-p480-800 125 67.67 MiB IMG+TXT 3阶段裁剪数据集,区域不小于480x480像素
1200 66 48.33 MiB IMG+TXT 短边不超过1200像素的数据集
stage3-p480-1200 125 79.92 MiB IMG+TXT 3阶段裁剪数据集,区域不小于480x480像素

标签聚类结果

原始文本版本

# 样本数量 Img-1 Img-2 Img-3 Img-4 Img-5 标签
0 7 1girl, solo, hat, looking_at_viewer, belt, one_eye_closed, shorts, smile, thighhighs, flower, jewelry, white_gloves
1 6 1girl, card_(medium), character_name, gem_(symbol), solo, blue_background, smile, star_(symbol)

表格版本

# 样本数量 Img-1 Img-2 Img-3 Img-4 Img-5 1girl solo hat looking_at_viewer belt one_eye_closed shorts smile thighhighs flower jewelry white_gloves card_(medium) character_name gem_(symbol) blue_background star_(symbol)
0 7 X X X X X X X X X X X X
1 6 X X X X X X X X
搜集汇总
数据集介绍
构建方式
在二次元角色数据集构建领域,针对《偶像大师灰姑娘女孩》中的角色東郷あい,本数据集通过自动化爬取系统从Danbooru、Pixiv、Zerochan等多个知名图像站点采集了66张原始图像及其标签。数据集构建过程中,对角色核心标签如短发、黑发、棕眼进行了修剪处理,以聚焦于角色本体特征。原始数据经过多种预处理流程,包括将图像最小边对齐至1400像素的元数据保留版本、短边不超过800或1200像素的标准化版本,以及采用三阶段裁剪策略生成面积不低于480x480像素的增强数据集,最终形成包含125个样本的多样化数据包。
特点
该数据集的核心特点在于其多版本结构化设计,提供raw、800、1200以及两种三阶段裁剪版本共五种数据包,分别满足原始元数据保留、不同分辨率训练及局部特征增强等需求。所有图像均附带详尽标签信息,便于进行多标签分类或文本到图像生成任务。此外,数据集还通过聚类分析将样本划分为不同簇,例如包含帽子、项链、白手套等元素的特定服饰组合,为角色外观多样性研究提供结构化视角。数据规模虽小但质量精良,适合用于动漫角色识别、风格迁移等细粒度生成任务。
使用方法
本数据集支持多种加载方式。对于原始数据,推荐使用Waifuc库进行加载,通过从HuggingFace Hub下载dataset-raw.zip压缩包并解压至本地目录,即可利用LocalSource接口逐项访问图像及其元数据与标签列表。对于其他预处理版本,可直接下载对应ZIP文件解压后获得IMG+TXT配对文件,适用于传统深度学习框架如PyTorch或TensorFlow的数据管道。用户亦可根据聚类结果筛选特定风格子集,以适配个性化训练需求。整个使用流程轻量高效,适合快速集成至动漫图像生成或理解项目中。
背景与挑战
背景概述
在文本到图像生成领域,高质量、标注精细的角色数据集是驱动模型精准生成特定虚拟角色的关键资源。由DeepGHS团队于近年创建并维护的CyberHarem/tougou_ai_idolmastercinderellagirls数据集,聚焦于《偶像大师灰姑娘女孩》中的角色東郷あい,收录了66张源自Danbooru、Pixiv、Zerochan等多平台的图像及其标签。该数据集的核心研究问题在于如何通过自动化爬取与多尺度裁剪技术,构建一个兼具视觉多样性与标签一致性的小样本角色图像库,以支持二次元角色生成模型的微调与评估。其在相关社区的影响力体现在提供了标准化的数据打包格式(如raw、800、1200及三级裁剪版本),并借助Waifuc工具实现了便捷的本地化加载,为角色定制化生成研究奠定了数据基础。
当前挑战
该数据集面临的核心挑战首先在于领域问题层面:文本到图像生成模型在处理特定动漫角色时,常因训练数据中角色外观的模糊性或标签噪声而导致生成结果与角色原型偏差显著,亟需一个标签纯净、特征明确的小样本数据集来约束生成方向。其次,构建过程中遭遇多重技术障碍:自动爬取系统需应对不同网站的异构数据格式与反爬机制,确保图像来源的合法性与多样性;对66张原始图像进行多尺度裁剪(如480×480区域裁剪)时,需平衡图像内容完整性与尺寸标准化,避免因裁剪丢失关键视觉特征;标签精简策略中,剔除核心特征(如短黑发、棕眼)后仍需保留足够丰富的服饰与场景标签,以维持数据集的泛化能力,这要求精确的标签过滤与聚类分析算法支撑。
常用场景
经典使用场景
在动漫角色生成与风格迁移领域,CyberHarem/tougou_ai_idolmastercinderellagirls 数据集为文本到图像(text-to-image)模型提供了精细化的训练素材。其包含66张高分辨率图像及结构化标签,特别适用于微调Stable Diffusion等生成模型,以准确复现東郷あい这一角色的核心视觉特征,如黑色短发与棕色眼眸,并支持在多样化构图与着装下保持角色一致性。
解决学术问题
该数据集有效解决了动漫角色定制化生成中的身份保持难题,即如何在多场景、多姿态下维持角色外观的语义稳定性。通过提供标注完整的图像簇与裁剪版本,它支持研究者探索条件生成对抗网络(cGAN)或扩散模型中的细粒度控制机制,推动了面向特定IP的少样本生成方法的发展,为虚拟角色版权保护与风格迁移评估提供了标准化基准。
衍生相关工作
该数据集衍生出多项经典工作,如基于Waifuc框架的自动爬取与标签聚类流水线,其提供的raw与stage3裁剪版本启发了多尺度训练策略的研究。此外,标签聚类结果(如服饰与动作组合)被用于探索解耦表示学习,推动角色属性分离与组合生成的相关论文,例如在DreamBooth和LoRA微调中作为角色先验数据,优化了特定角色的概念注入效果。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务