five

pancake/few_shot_datasets

收藏
Hugging Face2022-07-13 更新2024-03-04 收录
下载链接:
https://hf-mirror.com/datasets/pancake/few_shot_datasets
下载链接
链接失效反馈
官方服务:
资源简介:
该README文件描述了五个用于少样本分类的标准数据集:1) miniImageNet:包含100个类别,每个类别600张图像,基于ImageNet数据集构建,划分为64个训练类、16个验证类和20个测试类。2) tieredImageNet:包含608个类别,来自34个超类,划分为20个训练类、6个验证类和8个测试类,旨在扩大训练和测试阶段的领域差异。3) CIFAR-FS:基于CIFAR-100数据集,包含60,000张图像,划分为64个训练类、16个验证类和20个测试类。4) FC100:同样基于CIFAR-100,但更具多样性,划分为60个训练类、20个验证类和20个测试类。5) CUB:包含200种鸟类的11,788张图像,划分为100个训练类、50个验证类和50个测试类。

该README文件描述了五个用于少样本分类的标准数据集:1) miniImageNet:包含100个类别,每个类别600张图像,基于ImageNet数据集构建,划分为64个训练类、16个验证类和20个测试类。2) tieredImageNet:包含608个类别,来自34个超类,划分为20个训练类、6个验证类和8个测试类,旨在扩大训练和测试阶段的领域差异。3) CIFAR-FS:基于CIFAR-100数据集,包含60,000张图像,划分为64个训练类、16个验证类和20个测试类。4) FC100:同样基于CIFAR-100,但更具多样性,划分为60个训练类、20个验证类和20个测试类。5) CUB:包含200种鸟类的11,788张图像,划分为100个训练类、50个验证类和50个测试类。
提供机构:
pancake
原始信息汇总

数据集概述

数据集列表

miniImageNet

  • 来源:基于ImageNet构建
  • 类别数:100
  • 每类图像数:600
  • 分割:64类用于元训练,16类用于元验证,20类用于元测试

tieredImageNet

  • 来源:基于ImageNet
  • 类别数:608
  • 分割:20类用于元训练,6类用于元验证,8类用于元测试
  • 特点:根据超类别划分,以增大训练和测试阶段的领域差异

CIFAR-FS

  • 来源:从CIFAR-100分割
  • 图像总数:60,000
  • 类别数:100
  • 分割:64类用于训练,16类用于验证,20类用于评估

FC100

  • 来源:从CIFAR-100分割
  • 分割:60类用于训练,20类用于验证,20类用于测试
  • 特点:分割方式类似tieredImageNet,更具挑战性

CUB

  • 全称:CUB-200-2011
  • 类别数:200
  • 图像总数:11,788
  • 分割:100类用于训练,50类用于验证,50类用于测试
  • 特点:细粒度数据集,包含200种鸟类
搜集汇总
数据集介绍
main_image_url
构建方式
在少样本分类研究领域,数据集的构建方式直接影响模型的泛化能力与评估可靠性。pancake/few_shot_datasets整合了五个经典基准数据集,均遵循元学习范式下的类别划分原则。其中,miniImageNet从ImageNet中选取100个类别,每类包含600张图像,并按照64、16、20的比例划分为元训练、元验证和元测试集;tieredImageNet则基于34个超类划分608个类别,通过超类层级分离训练与测试领域,增强域差异。CIFAR-FS与FC100均源自CIFAR-100,前者随机划分100个类别为64、16、20,后者则采用类似tieredImageNet的层级结构,划分为60、20、20个类别以提升难度。CUB作为细粒度数据集,包含200种鸟类共11,788张图像,随机划分为100、50、50个类别的训练、验证与测试集。
使用方法
使用该数据集时,研究者可直接通过HuggingFace加载pancake/few_shot_datasets,按照预设的元训练、元验证与元测试划分进行实验。在模型训练阶段,建议采用episode采样策略,从元训练集中随机抽取支撑集与查询集以模拟少样本任务;验证与测试阶段则使用对应划分中的类别,保持任务分布的一致性。对于tieredImageNet和FC100,需注意其超类划分逻辑,避免在跨域评估中引入数据泄露。此外,CUB数据集因图像数量较少,可结合数据增强技术提升模型鲁棒性。最终,在五个数据集上分别报告准确率,可全面评估模型在通用、粗粒度与细粒度场景下的少样本学习能力。
背景与挑战
背景概述
在深度学习的广阔领域中,少样本分类任务旨在解决模型在仅拥有极少量标注样本时仍能有效识别新类别的核心问题。pancake/few_shot_datasets数据集集合应运而生,由研究团队精心整合了五个经典基准数据集,涵盖了通用物体识别与细粒度分类两大主流场景。该集合的创建时间可追溯至少样本学习研究蓬勃发展的时期,其核心研究问题在于如何构建一个统一且具有挑战性的评估平台,以衡量不同少样本学习算法的泛化能力。通过纳入miniImageNet、tieredImageNet、CIFAR-FS、FC100以及CUB-200-2011,该数据集不仅承袭了ImageNet和CIFAR-100等大规模数据集的丰富视觉知识,还引入了基于超类划分的领域差异设计,显著推动了少样本学习领域从理论探索向实用化评估的转变,成为众多后续研究不可或缺的验证基石。
当前挑战
当前,pancake/few_shot_datasets所承载的少样本分类任务面临多重挑战。首先,在领域问题层面,模型需克服极低数据量下的过拟合风险,例如在miniImageNet中仅依赖少量样本区分100个视觉类别,或在tieredImageNet中应对训练与测试阶段因超类划分而产生的大规模领域漂移,这对特征提取与迁移学习能力提出了严苛要求。其次,在数据集构建过程中,挑战体现在类别平衡与分布一致性上:CIFAR-FS与FC100虽同源于CIFAR-100,但FC100通过更精细的类别划分加剧了类间相似性,而CUB数据集作为细粒度基准,其200个鸟类物种的细微差异使得标注噪声与样本稀缺性并存,进一步放大了评估的难度。此外,不同子集间图像分辨率、背景复杂度及语义粒度的不统一,也为跨数据集泛化研究设置了天然障碍。
常用场景
经典使用场景
在少样本学习这一前沿研究领域中,pancake/few_shot_datasets数据集汇聚了五个经典基准——miniImageNet、tieredImageNet、CIFAR-FS、FC100与CUB,为模型从有限样本中快速泛化提供了标准化评估平台。这些数据集覆盖了从通用物体识别到精细粒度鸟类分类的多样化视觉任务,其经典使用场景在于衡量元学习算法在N-way K-shot设定下的表现,例如在5-way 1-shot或5-way 5-shot配置中测试模型对新类别的适应能力。通过统一的数据划分协议,研究者能够公平对比不同方法,推动少样本学习理论的深入发展。
解决学术问题
该数据集体系直面少样本学习中的核心学术难题:如何在极少量标注样本下实现高效的知识迁移与类别泛化。miniImageNet和tieredImageNet通过分层类别划分,模拟了训练与测试阶段领域差异显著的现实困境,从而检验模型对分布外数据的鲁棒性。CIFAR-FS与FC100则聚焦于低分辨率图像的密集特征提取挑战,而CUB引入细粒度差异,迫使模型捕捉物种间的细微判别线索。这些设计共同解答了过拟合、特征稀疏性及跨域泛化等关键问题,为少样本学习理论的实证验证奠定了坚实基础。
实际应用
在实际应用中,pancake/few_shot_datasets所代表的少样本学习范式深刻赋能了数据稀缺场景。例如,在医疗影像诊断中,罕见疾病的样本往往难以大量收集,借助在miniImageNet上预训练的元学习模型,系统可从寥寥数张X光片中快速识别病灶。在生态保护领域,CUB数据集训练出的细粒度分类器能够助力鸟类监测,通过少量野外照片实现物种自动鉴定。此外,工业缺陷检测与个性化推荐系统也受益于这些数据集构建的少样本框架,从而在样本获取成本高昂时维持高精度推理。
数据集最近研究
最新研究方向
在少样本学习领域,pancake/few_shot_datasets整合了多个经典基准数据集,如miniImageNet、tieredImageNet、CIFAR-FS、FC100和CUB,为模型在有限样本下的泛化能力评估提供了标准化平台。当前前沿研究聚焦于跨领域和细粒度场景的少样本学习,例如利用tieredImageNet基于超类划分的特性,增强训练与测试阶段的领域差异,以模拟真实世界中类别分布不均的挑战;同时,CUB作为细粒度数据集,推动了模型在物种识别等精细分类任务上的能力突破。这些数据集与元学习、度量学习及自监督预训练等热点方法紧密结合,成为检验算法鲁棒性与迁移性的关键工具,对推动人工智能在医疗影像、遥感监测等数据稀缺领域的应用具有深远意义。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务