CyberHarem/shikimi_pokemon

--- license: mit task_categories: - text-to-image tags: - art - not-for-all-audiences size_categories: - n<1K --- # Dataset of shikimi/シキミ (Pokémon) This is the dataset of shikimi/シキミ (Pokémon), containing 389 images and their tags. The core tags of this character are `purple_hair, glasses, short_hair, breasts, purple_eyes, bob_cut, bangs, blunt_bangs, large_breasts`, which are pruned in this dataset. Images are crawled from many sites (e.g. danbooru, pixiv, zerochan ...), the auto-crawling system is powered by [DeepGHS Team](https://github.com/deepghs)([huggingface organization](https://huggingface.co/deepghs)). ## List of Packages | Name | Images | Size | Download | Type | Description | |:-----------------|---------:|:-----------|:-----------------------------------------------------------------------------------------------------------------|:-----------|:---------------------------------------------------------------------| | raw | 389 | 316.78 MiB | [Download](https://huggingface.co/datasets/CyberHarem/shikimi_pokemon/resolve/main/dataset-raw.zip) | Waifuc-Raw | Raw data with meta information (min edge aligned to 1400 if larger). | | 800 | 389 | 211.13 MiB | [Download](https://huggingface.co/datasets/CyberHarem/shikimi_pokemon/resolve/main/dataset-800.zip) | IMG+TXT | dataset with the shorter side not exceeding 800 pixels. | | stage3-p480-800 | 796 | 379.77 MiB | [Download](https://huggingface.co/datasets/CyberHarem/shikimi_pokemon/resolve/main/dataset-stage3-p480-800.zip) | IMG+TXT | 3-stage cropped dataset with the area not less than 480x480 pixels. | | 1200 | 389 | 292.49 MiB | [Download](https://huggingface.co/datasets/CyberHarem/shikimi_pokemon/resolve/main/dataset-1200.zip) | IMG+TXT | dataset with the shorter side not exceeding 1200 pixels. | | stage3-p480-1200 | 796 | 496.78 MiB | [Download](https://huggingface.co/datasets/CyberHarem/shikimi_pokemon/resolve/main/dataset-stage3-p480-1200.zip) | IMG+TXT | 3-stage cropped dataset with the area not less than 480x480 pixels. | ### Load Raw Dataset with Waifuc We provide raw dataset (including tagged images) for [waifuc](https://deepghs.github.io/waifuc/main/tutorials/installation/index.html) loading. If you need this, just run the following code ```python import os import zipfile from huggingface_hub import hf_hub_download from waifuc.source import LocalSource # download raw archive file zip_file = hf_hub_download( repo_id='CyberHarem/shikimi_pokemon', repo_type='dataset', filename='dataset-raw.zip', ) # extract files to your directory dataset_dir = 'dataset_dir' os.makedirs(dataset_dir, exist_ok=True) with zipfile.ZipFile(zip_file, 'r') as zf: zf.extractall(dataset_dir) # load the dataset with waifuc source = LocalSource(dataset_dir) for item in source: print(item.image, item.meta['filename'], item.meta['tags']) ``` ## List of Clusters List of tag clustering result, maybe some outfits can be mined here. ### Raw Text Version | # | Samples | Img-1 | Img-2 | Img-3 | Img-4 | Img-5 | Tags | |----:|----------:|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------| | 0 | 17 |  |  |  |  |  | 1girl, purple_skirt, solo, cleavage, black_pantyhose, book, elbow_gloves, pen, smile, medium_breasts, holding, looking_at_viewer, shoes | | 1 | 9 |  |  |  |  |  | 1girl, elbow_gloves, looking_at_viewer, purple_dress, purple_skirt, cleavage, holding_pen, black_pantyhose, holding_book, black_gloves, large_bow, pokemon_(creature), :o, open_mouth, smile | | 2 | 18 |  |  |  |  |  | 1girl, hetero, nipples, sex, 1boy, pantyhose, blush, open_mouth, torn_clothes, penis, sweat, vaginal, heart, breasts_out, cum_in_pussy, pokemon_(creature), pokephilia, elbow_gloves, nude, purple_skirt, solo_focus, tongue, uncensored | | 3 | 24 |  |  |  |  |  | 1girl, 1boy, hetero, penis, solo_focus, blush, gloves, nipples, paizuri, facial, cum_on_breasts, mosaic_censoring, sweat | | 4 | 28 |  |  |  |  |  | 1girl, nude, solo, nipples, navel, blush, looking_at_viewer, pussy, smile, collarbone, medium_breasts, censored | ### Table Version | # | Samples | Img-1 | Img-2 | Img-3 | Img-4 | Img-5 | 1girl | purple_skirt | solo | cleavage | black_pantyhose | book | elbow_gloves | pen | smile | medium_breasts | holding | looking_at_viewer | shoes | purple_dress | holding_pen | holding_book | black_gloves | large_bow | pokemon_(creature) | :o | open_mouth | hetero | nipples | sex | 1boy | pantyhose | blush | torn_clothes | penis | sweat | vaginal | heart | breasts_out | cum_in_pussy | pokephilia | nude | solo_focus | tongue | uncensored | gloves | paizuri | facial | cum_on_breasts | mosaic_censoring | navel | pussy | collarbone | censored | |----:|----------:|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:--------|:---------------|:-------|:-----------|:------------------|:-------|:---------------|:------|:--------|:-----------------|:----------|:--------------------|:--------|:---------------|:--------------|:---------------|:---------------|:------------|:---------------------|:-----|:-------------|:---------|:----------|:------|:-------|:------------|:--------|:---------------|:--------|:--------|:----------|:--------|:--------------|:---------------|:-------------|:-------|:-------------|:---------|:-------------|:---------|:----------|:---------|:-----------------|:-------------------|:--------|:--------|:-------------|:-----------| | 0 | 17 |  |  |  |  |  | X | X | X | X | X | X | X | X | X | X | X | X | X | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | | 1 | 9 |  |  |  |  |  | X | X | | X | X | | X | | X | | | X | | X | X | X | X | X | X | X | X | | | | | | | | | | | | | | | | | | | | | | | | | | | | | 2 | 18 |  |  |  |  |  | X | X | | | | | X | | | | | | | | | | | | X | | X | X | X | X | X | X | X | X | X | X | X | X | X | X | X | X | X | X | X | | | | | | | | | | | 3 | 24 |  |  |  |  |  | X | | | | | | | | | | | | | | | | | | | | | X | X | | X | | X | | X | X | | | | | | | X | | | X | X | X | X | X | | | | | | 4 | 28 |  |  |  |  |  | X | | X | | | | | | X | X | | X | | | | | | | | | | | X | | | | X | | | | | | | | | X | | | | | | | | | X | X | X | X |

原始信息汇总

数据集概述

数据集信息

• 名称: Dataset of shikimi/シキミ (Pokémon)
• 许可证: MIT
• 任务类别: text-to-image
• 标签: art, not-for-all-audiences
• 大小类别: n<1K

数据集内容

• 图像数量: 389张
• 核心标签: purple_hair, glasses, short_hair, breasts, purple_eyes, bob_cut, bangs, blunt_bangs, large_breasts

数据包列表

名称	图像数量	大小	类型	描述
raw	389	316.78 MiB	Waifuc-Raw	原始数据，包含元信息（最小边对齐到1400像素，如果更大）。
800	389	211.13 MiB	IMG+TXT	短边不超过800像素的数据集。
stage3-p480-800	796	379.77 MiB	IMG+TXT	3阶段裁剪数据集，区域不小于480x480像素。
1200	389	292.49 MiB	IMG+TXT	短边不超过1200像素的数据集。
stage3-p480-1200	796	496.78 MiB	IMG+TXT	3阶段裁剪数据集，区域不小于480x480像素。

标签聚类结果

原始文本版本

#	样本数量	图像示例	标签
0	17		1girl, purple_skirt, solo, cleavage, black_pantyhose, book, elbow_gloves, pen, smile, medium_breasts, holding, looking_at_viewer, shoes
1	9		1girl, elbow_gloves, looking_at_viewer, purple_dress, purple_skirt, cleavage, holding_pen, black_pantyhose, holding_book, black_gloves, large_bow, pokemon_(creature), :o, open_mouth, smile
2	18		1girl, hetero, nipples, sex, 1boy, pantyhose, blush, open_mouth, torn_clothes, penis, sweat, vaginal, heart, breasts_out, cum_in_pussy, pokemon_(creature), pokephilia, elbow_gloves, nude, purple_skirt, solo_focus, tongue, uncensored
3	24		1girl, 1boy, hetero, penis, solo_focus, blush, gloves, nipples, paizuri, facial, cum_on_breasts, mosaic_censoring, sweat
4	28		1girl, nude, solo, nipples, navel, blush, looking_at_viewer, pussy, smile, collarbone, medium_breasts, censored

表格版本

#	样本数量	图像示例	1girl	purple_skirt	solo	cleavage	black_pantyhose	book	elbow_gloves	pen	smile	medium_breasts	holding	looking_at_viewer	shoes	purple_dress	holding_pen	holding_book	black_gloves	large_bow	pokemon_(creature)	:o	open_mouth	hetero	nipples	sex	1boy	pantyhose	blush	torn_clothes	penis	sweat	vaginal	heart	breasts_out	cum_in_pussy	pokephilia	nude	solo_focus	tongue	uncensored	gloves	paizuri	facial	cum_on_breasts	mosaic_censoring	navel	pussy	collarbone	censored
0	17		X	X	X	X	X	X	X	X	X	X	X	X	X
1	9		X	X		X	X		X		X			X		X	X	X	X	X	X	X	X
2	18		X	X					X												X		X	X	X	X	X	X	X	X	X	X	X	X	X	X	X	X	X	X	X
3	24		X																					X	X		X		X		X	X							X			X	X	X	X	X
4	28		X		X						X	X		X											X				X									X									X	X	X	X

搜集汇总

数据集介绍

构建方式

在图像生成领域，针对特定角色构建高质量数据集是提升模型表现的关键。本数据集聚焦于宝可梦系列中的角色shikimi/シキミ，共收录389张图像及其关联标签。数据采集工作由DeepGHS团队开发的自动化爬虫系统完成，图像来源涵盖danbooru、pixiv、zerochan等多个主流平台。数据集构建过程中，首先对原始图像进行元信息保留处理，并依据最小边长对齐至1400像素进行标准化。随后，衍生出多种规格的版本，包括将短边分别限制在800像素和1200像素的压缩版本，以及通过三阶段裁剪策略生成像素面积不低于480×480的区域聚焦版本，最终形成包含796张图像的增强数据集。

使用方法

使用者可根据任务需求灵活选择数据集版本。对于需要原始元信息的场景，推荐使用raw版本，并通过waifuc库进行加载：首先从HuggingFace Hub下载dataset-raw.zip压缩包，解压至本地目录后，利用LocalSource接口即可逐项获取图像及其文件名与标签信息。若追求高效训练，可直接选用800或1200版本的IMG+TXT格式数据。对于需要区域聚焦的任务，stage3系列版本更为适宜。所有版本均可通过HuggingFace Hub的hf_hub_download函数直接获取，下载后解压即可使用，无需额外数据预处理步骤。

背景与挑战

背景概述

在生成式人工智能与动漫文化交融的浪潮中，针对特定虚拟角色的精细化图像生成数据集成为推动文生图模型发展的关键要素。由DeepGHS团队于近期构建的CyberHarem/shikimi_pokemon数据集，聚焦于《宝可梦》系列中的角色シキミ（Shikimi），收录了389张高质量图像及其对应的标签信息。该数据集的核心研究问题在于如何系统性地整合来自Danbooru、Pixiv、Zerochan等多源平台的同人创作，通过自动化爬取与多尺度裁剪（如800像素与1200像素版本）构建标准化的训练资源。其影响力体现在为角色定制化文生图任务提供了可复现的基准，尤其针对动漫风格中复杂属性（如发型、服饰、表情）的细粒度关联建模，填补了小众角色数据集的空白。

当前挑战

该数据集面临的领域挑战在于文生图模型对动漫角色身份一致性的保持能力，需在生成过程中精准复现シキミ的核心视觉特征（如紫色短发、眼镜及特定服饰搭配），同时避免属性混淆或风格漂移。构建过程则遭遇多重技术困境：首先，跨平台数据采集需应对不同网站的版权协议与反爬机制，确保合法合规；其次，图像质量参差不齐，需通过边缘对齐与裁剪策略（如stage3-p480-800的三阶段裁剪）过滤低分辨率或构图不当的样本；最后，标签体系存在主观性与歧义性，例如对成人向内容（如裸露、性暗示场景）的标注需平衡语义完整性与伦理审查，而聚类分析中出现的冗余标签（如‘1girl’与‘solo’的语义重叠）进一步增加了数据清洗的复杂度。

常用场景

经典使用场景

CyberHarem/shikimi_pokemon 数据集在文本到图像生成领域扮演着基石角色，尤其适用于训练和评估能够根据精细标签（如紫色头发、眼镜、波波头等）生成特定动漫角色肖像的扩散模型。研究者利用其包含389张高分辨率图像及对应标注的丰富资源，可针对性地微调Stable Diffusion等预训练模型，以提升对宝可梦系列中‘シキミ’这一角色特征的理解与复现能力，从而推动可控图像生成技术的边界。

解决学术问题

该数据集有效解决了动漫角色定制化生成中数据稀缺与标签细粒度不足的学术难题。通过提供经过核心标签剪枝和聚类分析的高质量图像集合，它支持研究者深入探索多模态学习中的语义对齐机制，并验证在不同尺度（如800px与1200px）和裁剪策略（如三阶段裁剪）下模型对角色一致性保持的性能。其意义在于为少样本角色生成、风格迁移及标签噪声鲁棒性研究提供了标准化基准，促进了生成式模型在特定虚构实体上的泛化能力评估。

实际应用

在实际应用中，该数据集赋能了二次元内容创作与游戏资产开发的自动化流程。开发者可基于此训练定制化模型，实现从文本描述到‘シキミ’角色立绘、表情包或同人插画的快速生成，显著降低人工绘制成本。此外，其配套的waifuc数据加载工具与多分辨率版本（如stage3-p480-800）使得数据集能无缝集成到生产级管线中，为虚拟主播形象生成、个性化头像定制等商业场景提供高效解决方案。

数据集最近研究

最新研究方向

在二次元图像生成与多模态学习的前沿领域，针对特定角色（如宝可梦系列中的 shikimi）的高质量、细粒度数据集构建正成为推动文本到图像模型发展的关键环节。CyberHarem/shikimi_pokemon 数据集聚焦于该角色的 389 张图像及其标签，通过自动化爬取与多阶段裁剪技术（如 stage3-p480-800）实现了对图像分辨率与内容区域的精细控制，为 Stable Diffusion 等扩散模型的微调提供了标准化数据支撑。该数据集不仅涵盖了从日常装扮到特定场景（如宝可梦主题互动）的视觉多样性，还通过标签聚类分析（如服饰、姿态、交互关系）揭示了角色在不同语境下的视觉表征规律，这对于提升生成模型在角色一致性、属性细化及复杂场景理解上的表现具有重要意义。随着二次元文化在 AIGC 应用中的持续升温，此类面向特定 IP 角色的结构化数据集正成为连接创意表达与算法能力的桥梁，有望推动个性化内容生成、虚拟角色交互等热点方向的研究突破。