遇见数据集

CyberHarem/tethys_fireemblem

收藏
Hugging Face2024-01-17 更新2024-03-04 收录
官方服务:

资源简介:

--- license: mit task_categories: - text-to-image tags: - art - not-for-all-audiences size_categories: - n<1K --- # Dataset of tethys (Fire Emblem) This is the dataset of tethys (Fire Emblem), containing 20 images and their tags. The core tags of this character are `braid, earrings, long_hair, red_hair, hoop_earrings, single_braid, red_eyes, breasts, facial_mark, bangs`, which are pruned in this dataset. Images are crawled from many sites (e.g. danbooru, pixiv, zerochan ...), the auto-crawling system is powered by [DeepGHS Team](https://github.com/deepghs)([huggingface organization](https://huggingface.co/deepghs)). ## List of Packages | Name | Images | Size | Download | Type | Description | |:-----------------|---------:|:----------|:-------------------------------------------------------------------------------------------------------------------|:-----------|:---------------------------------------------------------------------| | raw | 20 | 17.96 MiB | [Download](https://huggingface.co/datasets/CyberHarem/tethys_fireemblem/resolve/main/dataset-raw.zip) | Waifuc-Raw | Raw data with meta information (min edge aligned to 1400 if larger). | | 800 | 20 | 11.86 MiB | [Download](https://huggingface.co/datasets/CyberHarem/tethys_fireemblem/resolve/main/dataset-800.zip) | IMG+TXT | dataset with the shorter side not exceeding 800 pixels. | | stage3-p480-800 | 36 | 19.96 MiB | [Download](https://huggingface.co/datasets/CyberHarem/tethys_fireemblem/resolve/main/dataset-stage3-p480-800.zip) | IMG+TXT | 3-stage cropped dataset with the area not less than 480x480 pixels. | | 1200 | 20 | 16.78 MiB | [Download](https://huggingface.co/datasets/CyberHarem/tethys_fireemblem/resolve/main/dataset-1200.zip) | IMG+TXT | dataset with the shorter side not exceeding 1200 pixels. | | stage3-p480-1200 | 36 | 27.03 MiB | [Download](https://huggingface.co/datasets/CyberHarem/tethys_fireemblem/resolve/main/dataset-stage3-p480-1200.zip) | IMG+TXT | 3-stage cropped dataset with the area not less than 480x480 pixels. | ### Load Raw Dataset with Waifuc We provide raw dataset (including tagged images) for [waifuc](https://deepghs.github.io/waifuc/main/tutorials/installation/index.html) loading. If you need this, just run the following code ```python import os import zipfile from huggingface_hub import hf_hub_download from waifuc.source import LocalSource # download raw archive file zip_file = hf_hub_download( repo_id='CyberHarem/tethys_fireemblem', repo_type='dataset', filename='dataset-raw.zip', ) # extract files to your directory dataset_dir = 'dataset_dir' os.makedirs(dataset_dir, exist_ok=True) with zipfile.ZipFile(zip_file, 'r') as zf: zf.extractall(dataset_dir) # load the dataset with waifuc source = LocalSource(dataset_dir) for item in source: print(item.image, item.meta['filename'], item.meta['tags']) ``` ## List of Clusters List of tag clustering result, maybe some outfits can be mined here. ### Raw Text Version | # | Samples | Img-1 | Img-2 | Img-3 | Img-4 | Img-5 | Tags | |----:|----------:|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:-----------------------------------------------------------------------------------------------------------------------------------------------------------| | 0 | 20 | ![](samples/0/clu0-sample0.png) | ![](samples/0/clu0-sample1.png) | ![](samples/0/clu0-sample2.png) | ![](samples/0/clu0-sample3.png) | ![](samples/0/clu0-sample4.png) | 1girl, solo, armlet, midriff, navel, dancer, looking_at_viewer, forehead_mark, smile, bare_shoulders, bracelet, simple_background, pants, white_background | ### Table Version | # | Samples | Img-1 | Img-2 | Img-3 | Img-4 | Img-5 | 1girl | solo | armlet | midriff | navel | dancer | looking_at_viewer | forehead_mark | smile | bare_shoulders | bracelet | simple_background | pants | white_background | |----:|----------:|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:--------|:-------|:---------|:----------|:--------|:---------|:--------------------|:----------------|:--------|:-----------------|:-----------|:--------------------|:--------|:-------------------| | 0 | 20 | ![](samples/0/clu0-sample0.png) | ![](samples/0/clu0-sample1.png) | ![](samples/0/clu0-sample2.png) | ![](samples/0/clu0-sample3.png) | ![](samples/0/clu0-sample4.png) | X | X | X | X | X | X | X | X | X | X | X | X | X | X |

--- 许可证:MIT协议(MIT) 任务类别: - 文本到图像(text-to-image) 标签: - 艺术(art) - 不适合全年龄段受众(not-for-all-audiences) 样本量类别: - 样本量少于1000(n<1K) --- # 《火焰纹章(Fire Emblem)》角色缇缇丝数据集 本数据集收录《火焰纹章(Fire Emblem)》角色缇缇丝的相关素材,包含20张图像及其配套标注标签。 该角色的核心标注标签为`编发(braid)、耳环(earrings)、长发(long_hair)、红发(red_hair)、圈形耳环(hoop_earrings)、单麻花辫(single_braid)、红瞳(red_eyes)、胸部(breasts)、面部印记(facial_mark)、刘海(bangs)`,本数据集已对上述核心标签进行了剪枝处理。 本数据集的图像从多个平台爬取(如danbooru、pixiv、zerochan等),自动爬取系统由DeepGHS团队(https://github.com/deepghs)及Hugging Face官方机构(https://huggingface.co/deepghs)提供技术支持。 ## 数据集包列表 | 包名称 | 图像数量 | 总大小 | 下载链接 | 数据类型 | 说明 | |:-----------------|---------:|:----------|:-------------------------------------------------------------------------------------------------------------------|:---------------|:---------------------------------------------------------------------| | raw | 20 | 17.96 MiB | [下载](https://huggingface.co/datasets/CyberHarem/tethys_fireemblem/resolve/main/dataset-raw.zip) | Waifuc-Raw | 包含元信息的原始数据集,若图像短边大于1400像素则将其对齐至1400像素。 | | 800 | 20 | 11.86 MiB | [下载](https://huggingface.co/datasets/CyberHarem/tethys_fireemblem/resolve/main/dataset-800.zip) | IMG+TXT | 短边尺寸不超过800像素的数据集。 | | stage3-p480-800 | 36 | 19.96 MiB | [下载](https://huggingface.co/datasets/CyberHarem/tethys_fireemblem/resolve/main/dataset-stage3-p480-800.zip) | IMG+TXT | 3阶段裁剪数据集,裁剪区域尺寸不小于480×480像素。 | | 1200 | 20 | 16.78 MiB | [下载](https://huggingface.co/datasets/CyberHarem/tethys_fireemblem/resolve/main/dataset-1200.zip) | IMG+TXT | 短边尺寸不超过1200像素的数据集。 | | stage3-p480-1200 | 36 | 27.03 MiB | [下载](https://huggingface.co/datasets/CyberHarem/tethys_fireemblem/resolve/main/dataset-stage3-p480-1200.zip) | IMG+TXT | 3阶段裁剪数据集,裁剪区域尺寸不小于480×480像素。 | ### 使用Waifuc加载原始数据集 我们提供了支持Waifuc加载的原始数据集(包含带标注的图像)。如需使用,请运行以下代码: python import os import zipfile from huggingface_hub import hf_hub_download from waifuc.source import LocalSource # 下载原始数据集压缩包 zip_file = hf_hub_download( repo_id='CyberHarem/tethys_fireemblem', repo_type='dataset', filename='dataset-raw.zip', ) # 将文件解压至目标目录 dataset_dir = 'dataset_dir' os.makedirs(dataset_dir, exist_ok=True) with zipfile.ZipFile(zip_file, 'r') as zf: zf.extractall(dataset_dir) # 使用Waifuc加载数据集 source = LocalSource(dataset_dir) for item in source: print(item.image, item.meta['filename'], item.meta['tags']) ## 标签聚类结果列表 本部分为标签聚类结果,可从中挖掘角色的不同穿搭风格。 ### 原始文本版本 | 聚类ID | 样本数量 | 示例图1 | 示例图2 | 示例图3 | 示例图4 | 示例图5 | 标签 | |----:|----------:|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:-----------------------------------------------------------------------------------------------------------------------------------------------------------| | 0 | 20 | ![](samples/0/clu0-sample0.png) | ![](samples/0/clu0-sample1.png) | ![](samples/0/clu0-sample2.png) | ![](samples/0/clu0-sample3.png) | ![](samples/0/clu0-sample4.png) | 单人女性(1girl)、单独出镜(solo)、臂饰(armlet)、腰腹露肤(midriff)、肚脐(navel)、舞者(dancer)、注视镜头(looking_at_viewer)、额头印记(forehead_mark)、微笑(smile)、露肩(bare_shoulders)、手链(bracelet)、简洁背景(simple_background)、长裤(pants)、纯白背景(white_background) | ### 表格版本 | 聚类ID | 样本数量 | 示例图1 | 示例图2 | 示例图3 | 示例图4 | 示例图5 | 1girl | solo | armlet | midriff | navel | dancer | looking_at_viewer | forehead_mark | smile | bare_shoulders | bracelet | simple_background | pants | white_background | |----:|----------:|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:--------|:-------|:---------|:----------|:--------|:---------|:--------------------|:----------------|:--------|:-----------------|:-----------|:--------------------|:--------|:-------------------| | 0 | 20 | ![](samples/0/clu0-sample0.png) | ![](samples/0/clu0-sample1.png) | ![](samples/0/clu0-sample2.png) | ![](samples/0/clu0-sample3.png) | ![](samples/0/clu0-sample4.png) | X | X | X | X | X | X | X | X | X | X | X | X | X | X |

提供机构:
CyberHarem
原始信息汇总

数据集概述

数据集信息

  • 名称: Dataset of tethys (Fire Emblem)
  • 描述: 包含20张图片及其标签的数据集。
  • 核心标签: braid, earrings, long_hair, red_hair, hoop_earrings, single_braid, red_eyes, breasts, facial_mark, bangs
  • 来源: 图片从多个网站爬取,如danbooru, pixiv, zerochan等。

数据集包列表

名称 图片数量 大小 类型 描述
raw 20 17.96 MiB Waifuc-Raw 包含元信息的原始数据(最小边对齐到1400像素,如果更大)。
800 20 11.86 MiB IMG+TXT 短边不超过800像素的数据集。
stage3-p480-800 36 19.96 MiB IMG+TXT 3阶段裁剪数据集,区域不小于480x480像素。
1200 20 16.78 MiB IMG+TXT 短边不超过1200像素的数据集。
stage3-p480-1200 36 27.03 MiB IMG+TXT 3阶段裁剪数据集,区域不小于480x480像素。

标签聚类结果

原始文本版本

# 样本数量 图片1 图片2 图片3 图片4 图片5 标签
0 20 1girl, solo, armlet, midriff, navel, dancer, looking_at_viewer, forehead_mark, smile, bare_shoulders, bracelet, simple_background, pants, white_background

表格版本

# 样本数量 图片1 图片2 图片3 图片4 图片5 1girl solo armlet midriff navel dancer looking_at_viewer forehead_mark smile bare_shoulders bracelet simple_background pants white_background
0 20 X X X X X X X X X X X X X X
搜集汇总
数据集介绍
CyberHarem/tethys_fireemblem 数据集图片
构建方式
该数据集聚焦于《火焰之纹章》系列中的角色特提斯,通过自动化爬取系统从Danbooru、Pixiv、Zerochan等多个艺术图站采集原始图像与标签信息。数据构建依托DeepGHS团队开发的Waifuc框架,初始采集获得20张图片,并依据角色核心外观特征(如辫子、耳环、红发、红眼等)进行标签精简。数据集提供多种处理版本,包括原始元数据包、短边限制为800像素或1200像素的标准化版本,以及经过三阶段裁剪、面积不小于480×480像素的增强版本,以满足不同训练需求。
特点
该数据集虽规模较小(仅含20张图像),但通过多版本设计显著提升了适用性。原始版本保留完整元数据,便于研究者回溯来源;裁剪版本通过三阶段算法生成更多样本(36张),有效扩充了训练数据量。标签系统聚焦于角色辨识度高的视觉特征,如辫子、耳环、面部标记等,并提供了聚类分析结果,可辅助挖掘服饰搭配模式。所有版本均以IMG+TXT格式存储,兼容主流文生图模型的训练范式。
使用方法
研究者可通过HuggingFace Hub直接下载各压缩包,其中原始版本支持Waifuc框架的本地加载,通过解压后使用LocalSource接口即可迭代图像及标签。标准化版本(如800/1200)可直接用于训练,裁剪版本则适合需要更多样本的场景。此外,数据集提供了聚类结果的图文表格,可辅助分析角色常见构图与配件组合。建议优先使用三阶段裁剪版本以平衡数据量与图像质量。
背景与挑战
背景概述
在人工智能生成内容(AIGC)领域,尤其是文本到图像(text-to-image)任务中,高质量、精细标注的动漫角色数据集是推动模型生成能力与风格控制的关键资源。该数据集由CyberHarem团队于2024年创建,依托DeepGHS组织的自动化爬取系统,聚焦于《火焰之纹章》系列中的角色“Tethys”。核心研究问题在于如何通过少量样本(仅20张原始图像)实现角色核心特征(如辫子、耳环、红发、红瞳等)的精准提取与多尺度呈现,为后续的扩散模型微调提供结构化数据支撑。该数据集通过提供raw、800、1200及三阶段裁剪版本,显著提升了小样本角色数据在动漫风格生成中的可用性,对二次元角色个性化生成研究具有示范性影响。
当前挑战
该数据集面临的首要挑战在于领域问题的复杂性:文本到图像生成任务要求模型从有限样本中泛化出角色的一致外观,但Tethys的独特装饰(如臂环、额纹)与舞蹈家身份相关的动态姿态,使得模型容易在细节保真度上出现偏差。构建过程中的挑战尤为突出:数据来源分散于Danbooru、Pixiv等多个平台,自动爬取系统虽高效,却面临图像版权、元数据一致性及标签噪声等问题;同时,仅20张原始图像导致数据增强策略(如三阶段裁剪)需在保留特征完整性与提升样本多样性之间精细平衡,而标签剪枝(pruned tags)操作也可能丢失部分上下文关联信息,影响下游训练中角色概念的稳定收敛。
常用场景
经典使用场景
在二次元角色生成与风格迁移领域,CyberHarem/tethys_fireemblem数据集凭借其精心标注的20张高质量图像及标签信息,成为文本到图像生成模型微调与评估的经典基准。该数据集聚焦于《火焰之纹章》中的角色特蒂斯,核心标签涵盖辫子、耳环、长发、红发等视觉特征,为研究者提供了高度结构化的人物属性描述。通过多分辨率版本(如800像素、1200像素)及三级裁剪处理,该数据集支持从粗粒度到细粒度的图像生成任务,尤其适用于基于扩散模型或生成对抗网络的角色一致性生成与风格可控创作。
实际应用
在实际应用中,该数据集支撑了游戏角色快速原型设计与粉丝创作生态的构建。游戏开发者可利用其训练轻量级生成模型,从文本描述直接生成符合角色设定的概念图,大幅缩短美术迭代周期。同时,该数据集为动漫社区中的个性化角色定制工具提供了数据基础,支持用户通过简单标签(如“红发”“耳环”)生成风格各异的同人作品。此外,多分辨率版本适配了移动端与PC端的不同算力需求,使得实时图像生成与批量处理在商业场景中成为可能。
衍生相关工作
该数据集催生了多项经典工作,包括基于Waifuc框架的自动化数据流水线优化,以及针对动漫角色的三级裁剪与标签聚类方法。其提供的原始数据与多阶段处理版本,启发了后续研究如角色身份保持扩散模型(Character-Preserving Diffusion)和属性解耦生成对抗网络。此外,该数据集常被用于对比不同标签粒度对生成质量的影响,推动了如DreamBooth和Textual Inversion等个性化生成技术在二次元领域的适配与改进,成为评估模型角色泛化能力的重要测试床。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务