遇见数据集

CyberHarem/maryland_kantaicollection

收藏
Hugging Face2024-01-16 更新2024-03-04 收录
官方服务:

资源简介:

--- license: mit task_categories: - text-to-image tags: - art - not-for-all-audiences size_categories: - n<1K --- # Dataset of maryland (Kantai Collection) This is the dataset of maryland (Kantai Collection), containing 146 images and their tags. The core tags of this character are `long_hair, breasts, twintails, large_breasts, low_twintails, blue_bow, bow, light_brown_hair, blue_eyes, headgear, between_breasts, necktie_between_breasts, hair_bow, braid, grey_eyes, blonde_hair`, which are pruned in this dataset. Images are crawled from many sites (e.g. danbooru, pixiv, zerochan ...), the auto-crawling system is powered by [DeepGHS Team](https://github.com/deepghs)([huggingface organization](https://huggingface.co/deepghs)). ## List of Packages | Name | Images | Size | Download | Type | Description | |:-----------------|---------:|:-----------|:---------------------------------------------------------------------------------------------------------------------------|:-----------|:---------------------------------------------------------------------| | raw | 146 | 188.06 MiB | [Download](https://huggingface.co/datasets/CyberHarem/maryland_kantaicollection/resolve/main/dataset-raw.zip) | Waifuc-Raw | Raw data with meta information (min edge aligned to 1400 if larger). | | 800 | 146 | 109.59 MiB | [Download](https://huggingface.co/datasets/CyberHarem/maryland_kantaicollection/resolve/main/dataset-800.zip) | IMG+TXT | dataset with the shorter side not exceeding 800 pixels. | | stage3-p480-800 | 364 | 242.30 MiB | [Download](https://huggingface.co/datasets/CyberHarem/maryland_kantaicollection/resolve/main/dataset-stage3-p480-800.zip) | IMG+TXT | 3-stage cropped dataset with the area not less than 480x480 pixels. | | 1200 | 146 | 169.41 MiB | [Download](https://huggingface.co/datasets/CyberHarem/maryland_kantaicollection/resolve/main/dataset-1200.zip) | IMG+TXT | dataset with the shorter side not exceeding 1200 pixels. | | stage3-p480-1200 | 364 | 336.35 MiB | [Download](https://huggingface.co/datasets/CyberHarem/maryland_kantaicollection/resolve/main/dataset-stage3-p480-1200.zip) | IMG+TXT | 3-stage cropped dataset with the area not less than 480x480 pixels. | ### Load Raw Dataset with Waifuc We provide raw dataset (including tagged images) for [waifuc](https://deepghs.github.io/waifuc/main/tutorials/installation/index.html) loading. If you need this, just run the following code ```python import os import zipfile from huggingface_hub import hf_hub_download from waifuc.source import LocalSource # download raw archive file zip_file = hf_hub_download( repo_id='CyberHarem/maryland_kantaicollection', repo_type='dataset', filename='dataset-raw.zip', ) # extract files to your directory dataset_dir = 'dataset_dir' os.makedirs(dataset_dir, exist_ok=True) with zipfile.ZipFile(zip_file, 'r') as zf: zf.extractall(dataset_dir) # load the dataset with waifuc source = LocalSource(dataset_dir) for item in source: print(item.image, item.meta['filename'], item.meta['tags']) ``` ## List of Clusters List of tag clustering result, maybe some outfits can be mined here. ### Raw Text Version | # | Samples | Img-1 | Img-2 | Img-3 | Img-4 | Img-5 | Tags | |----:|----------:|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------| | 0 | 12 | ![](samples/0/clu0-sample0.png) | ![](samples/0/clu0-sample1.png) | ![](samples/0/clu0-sample2.png) | ![](samples/0/clu0-sample3.png) | ![](samples/0/clu0-sample4.png) | 1girl, blue_necktie, garter_straps, grey_dress, solo, black_gloves, black_thighhighs, grey_capelet, pleated_dress, strapless_dress, blush, cowboy_shot, white_background, white_shirt, radio_antenna | | 1 | 8 | ![](samples/1/clu1-sample0.png) | ![](samples/1/clu1-sample1.png) | ![](samples/1/clu1-sample2.png) | ![](samples/1/clu1-sample3.png) | ![](samples/1/clu1-sample4.png) | 1girl, black_gloves, blue_necktie, grey_capelet, grey_dress, solo, white_background, simple_background, upper_body, looking_at_viewer, strapless_dress, blue_capelet, medium_breasts, smile | | 2 | 14 | ![](samples/2/clu2-sample0.png) | ![](samples/2/clu2-sample1.png) | ![](samples/2/clu2-sample2.png) | ![](samples/2/clu2-sample3.png) | ![](samples/2/clu2-sample4.png) | alternate_costume, fake_animal_ears, playboy_bunny, rabbit_ears, solo, 1girl, detached_collar, strapless_leotard, wrist_cuffs, black_leotard, blue_necktie, simple_background, pantyhose, tail, white_background | ### Table Version | # | Samples | Img-1 | Img-2 | Img-3 | Img-4 | Img-5 | 1girl | blue_necktie | garter_straps | grey_dress | solo | black_gloves | black_thighhighs | grey_capelet | pleated_dress | strapless_dress | blush | cowboy_shot | white_background | white_shirt | radio_antenna | simple_background | upper_body | looking_at_viewer | blue_capelet | medium_breasts | smile | alternate_costume | fake_animal_ears | playboy_bunny | rabbit_ears | detached_collar | strapless_leotard | wrist_cuffs | black_leotard | pantyhose | tail | |----:|----------:|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:--------------------------------|:--------|:---------------|:----------------|:-------------|:-------|:---------------|:-------------------|:---------------|:----------------|:------------------|:--------|:--------------|:-------------------|:--------------|:----------------|:--------------------|:-------------|:--------------------|:---------------|:-----------------|:--------|:--------------------|:-------------------|:----------------|:--------------|:------------------|:--------------------|:--------------|:----------------|:------------|:-------| | 0 | 12 | ![](samples/0/clu0-sample0.png) | ![](samples/0/clu0-sample1.png) | ![](samples/0/clu0-sample2.png) | ![](samples/0/clu0-sample3.png) | ![](samples/0/clu0-sample4.png) | X | X | X | X | X | X | X | X | X | X | X | X | X | X | X | | | | | | | | | | | | | | | | | | 1 | 8 | ![](samples/1/clu1-sample0.png) | ![](samples/1/clu1-sample1.png) | ![](samples/1/clu1-sample2.png) | ![](samples/1/clu1-sample3.png) | ![](samples/1/clu1-sample4.png) | X | X | | X | X | X | | X | | X | | | X | | | X | X | X | X | X | X | | | | | | | | | | | | 2 | 14 | ![](samples/2/clu2-sample0.png) | ![](samples/2/clu2-sample1.png) | ![](samples/2/clu2-sample2.png) | ![](samples/2/clu2-sample3.png) | ![](samples/2/clu2-sample4.png) | X | X | | | X | | | | | | | | X | | | X | | | | | | X | X | X | X | X | X | X | X | X | X |

提供机构:
CyberHarem
原始信息汇总

数据集概述

数据集名称

Dataset of maryland (Kantai Collection)

数据集描述

该数据集包含146张图片及其标签,主要标签包括long_hair, breasts, twintails, large_breasts, low_twintails, blue_bow, bow, light_brown_hair, blue_eyes, headgear, between_breasts, necktie_between_breasts, hair_bow, braid, grey_eyes, blonde_hair

数据集大小

  • 图片数量:146张
  • 数据集大小:188.06 MiB(原始数据)

数据集下载

名称 图片数量 大小 类型 描述
raw 146 188.06 MiB Waifuc-Raw 包含元信息的原始数据(最小边对齐到1400像素,如果更大)。
800 146 109.59 MiB IMG+TXT 短边不超过800像素的数据集。
stage3-p480-800 364 242.30 MiB IMG+TXT 3阶段裁剪数据集,区域不小于480x480像素。
1200 146 169.41 MiB IMG+TXT 短边不超过1200像素的数据集。
stage3-p480-1200 364 336.35 MiB IMG+TXT 3阶段裁剪数据集,区域不小于480x480像素。

标签聚类结果

原始文本版本

# 样本数量 图片示例 标签
0 12 1girl, blue_necktie, garter_straps, grey_dress, solo, black_gloves, black_thighhighs, grey_capelet, pleated_dress, strapless_dress, blush, cowboy_shot, white_background, white_shirt, radio_antenna
1 8 1girl, black_gloves, blue_necktie, grey_capelet, grey_dress, solo, white_background, simple_background, upper_body, looking_at_viewer, strapless_dress, blue_capelet, medium_breasts, smile
2 14 alternate_costume, fake_animal_ears, playboy_bunny, rabbit_ears, solo, 1girl, detached_collar, strapless_leotard, wrist_cuffs, black_leotard, blue_necktie, simple_background, pantyhose, tail, white_background

表格版本

# 样本数量 图片示例 1girl blue_necktie garter_straps grey_dress solo black_gloves black_thighhighs grey_capelet pleated_dress strapless_dress blush cowboy_shot white_background white_shirt radio_antenna simple_background upper_body looking_at_viewer blue_capelet medium_breasts smile alternate_costume fake_animal_ears playboy_bunny rabbit_ears detached_collar strapless_leotard wrist_cuffs black_leotard pantyhose tail
0 12 X X X X X X X X X X X X X X X
1 8 X X X X X X X X X X X X X X
2 14 X X X X X X X X X X X X X X X
搜集汇总
数据集介绍
CyberHarem/maryland_kantaicollection 数据集图片
构建方式
在二次元角色图像数据集的构建领域,针对《舰队Collection》中的马里兰角色,本数据集通过多源爬虫技术从Danbooru、Pixiv、Zerochan等知名插画平台采集了146幅高质量图像。依托DeepGHS团队开发的自动化采集系统,数据收集过程实现了高效与精准。图像经过精细筛选,并剔除了核心标签(如长发、双马尾、蓝瞳等)以聚焦角色特征。数据集提供多种预处理版本,包括原始元数据包、限定短边不超过800或1200像素的标准化版本,以及通过三级裁剪策略生成的不小于480×480像素的区域聚焦版本,充分满足不同训练需求。
使用方法
使用者可通过Hugging Face Hub直接下载所需的压缩包文件。原始数据集支持通过Waifuc框架加载,用户只需下载`dataset-raw.zip`并解压至本地目录,即可利用`LocalSource`接口便捷地遍历图像及其元数据(如文件名、标签)。对于追求即用性的场景,可直接采用`800`或`1200`等预处理版本,这些包内已包含对齐后的图像与对应文本描述,无需额外处理即可输入至文本到图像生成模型进行训练或微调。
背景与挑战
背景概述
随着生成式人工智能在二次元文化领域的蓬勃发展,高质量、细粒度的角色数据集成为驱动文本到图像模型性能提升的关键基石。在此背景下,由DeepGHS团队于近期创建的Maryland(Kantai Collection)数据集应运而生,旨在为《舰队Collection》中的人气角色马里兰提供标准化、多模态的训练资源。该数据集汇聚了146张源自Danbooru、Pixiv等主流插画社区的高清图像,并附有详尽的标签注释,核心特征涵盖双马尾、蓝瞳、蝴蝶结等标志性视觉元素。通过提供raw、800、1200及三级裁剪等多种规格的压缩包,该数据集不仅降低了二次元角色生成任务的数据获取门槛,更以其细粒度标签聚类功能,为角色外观的多样化理解与生成研究树立了新的标杆,对推动动漫风格图像合成领域的发展具有重要参考价值。
当前挑战
当前数据集面临的首要挑战在于解决二次元角色生成中的细粒度概念混淆问题,即如何从有限样本中精准捕捉马里兰的独特特征(如低双马尾与蓝色蝴蝶结的搭配),避免与相似角色产生语义重叠。此外,构建过程中遭遇了多源数据整合的难题:来自不同社区的图像在画风、分辨率与标注规范上存在显著差异,需通过自动爬取系统进行去重与标准化裁剪,确保训练数据的纯净度。同时,仅146张的样本规模限制了模型对角色姿态与背景多样性的泛化能力,而标签聚类结果虽揭示了服饰变体(如兔女郎装),但如何平衡核心特征与罕见搭配的表示权重,仍是提升生成质量的关键瓶颈。
常用场景
经典使用场景
在文本到图像生成(text-to-image)与动漫角色数据集构建的前沿领域,CyberHarem/maryland_kantaicollection 作为《舰队Collection》中马里兰(Maryland)角色的专门数据集,包含了146张高分辨率图像及其精细的标签元数据。该数据集最经典的用途在于驱动基于扩散模型(如Stable Diffusion)的角色定制化微调,研究者可利用其提供的原始图像与裁剪版本(如stage3-p480-800),结合Waifuc等工具进行数据加载与增强,从而训练出能准确生成特定二次元角色形象、服装细节与姿态的生成模型。其标签系统涵盖了核心特征(如双马尾、蓝蝴蝶结、灰裙)与聚类分析结果,为角色一致性生成与多风格迁移提供了高质量的数据基石。
解决学术问题
该数据集精准回应了动漫图像生成领域中长期存在的角色身份保持难题(character identity preservation),即在多视角、多服装变换下维持角色核心外观特征的一致性。传统文本到图像模型常因训练数据混杂而生成与目标角色不符的“崩坏”形象。通过提供经过严格标签筛选与聚类分析(如三阶段裁剪与团体聚类)的马里兰专属图像集,研究者得以系统探究如何利用小样本(n<1K)数据高效微调预训练模型,从而在学术上验证了条件控制生成(如ControlNet、LoRA)在二次元角色领域的普适性,并推动了关于标签噪声对生成质量影响的量化分析。
实际应用
在实际应用层面,该数据集已成为二次元文化创意产业中角色IP数字资产化的关键技术支撑。游戏开发商与同人创作者可借助该数据集微调生成模型,快速产出马里兰角色在不同场景(如日常装、兔女郎装等聚类主题)下的高质量插画、立绘或宣传物料,大幅降低人工绘制成本。此外,基于该数据集训练的模型可被集成到自动化角色设计工具中,服务于虚拟主播形象生成、漫画分镜辅助创作以及粉丝向个性化内容定制。其多分辨率格式(800px、1200px)也适配了从移动端到网页端的实际部署需求,体现了学术成果向工业级应用的转化效能。
数据集最近研究
最新研究方向
在二次元文化持续繁荣与生成式人工智能技术迅猛发展的交汇点上,以《舰队Collection》中“马里兰”角色为代表的精细化角色数据集,正成为文本到图像生成领域的前沿研究基石。该数据集通过多源爬取与自动化标注,收录了146张高质量图像及其详尽标签,其核心价值在于为定制化角色生成提供了结构化的训练素材。当前研究热点聚焦于利用此类数据集驱动高保真度的角色一致性生成,探索跨模态对齐与细粒度属性控制。随着Danbooru等社区标签体系的成熟,研究者得以挖掘更复杂的视觉概念组合,推动从单一角色生成向多角色交互、场景叙事及风格迁移等高级应用的演进。这一方向不仅深化了数字艺术创作的自动化水平,也为虚拟偶像产业与个性化内容生产注入了新的可能性,其影响力正从娱乐领域向数字人构建与文化遗产数字化保护等广阔疆域辐射。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务