遇见数据集

electricsheepafrica/africa-worldbank-social-protection-labor

收藏
Hugging Face2026-05-26 更新2026-05-31 收录
官方服务:

资源简介:

该数据集名为“社会保护与劳动——非洲(世界银行WDI)”,包含115,409个观测值,覆盖54个非洲国家,时间跨度为1960年至2025年,涵盖156个不同的指标。数据来源于世界银行的世界发展指标(WDI),这是全球最常引用的全球发展数据参考,编译了来自国家账户、政府机构和合作伙伴组织(如IMF、WHO、FAO、UNESCO、ILO、联合国机构)的官方认可国际统计数据。数据集主题为社会保护与劳动,包括儿童农业就业、农业就业比例、就业人口比率等指标。数据通过世界银行公共API获取,过滤了空值记录,年份规范化为整数,值转换为float64类型。地理覆盖包括54个非洲国家,如南非、埃及、毛里求斯等。数据集模式包括indicator_id(指标代码)、indicator_name(指标名称)、country_iso2(ISO alpha-2国家代码)、country_iso3(ISO alpha-3国家代码,首选连接键)、country_name(国家名称)、year(年份)、value(观测值)、unit(测量单位)和obs_status(观测状态标志)。数据质量方面,记录在获取时过滤了空观测值,指标覆盖因国家和年份而异,并非每个(指标×国家×年份)组合都存在,且仅包含独立主权国家。数据集由Electric Sheep Africa重新打包,旨在为非洲提供统一的、机器学习就绪的数据层,便于研究人员和开发者使用。

This dataset, named Social Protection & Labor — Africa (World Bank WDI), contains 115,409 observations of Social Protection & Labor data across 54 Africa countries, spanning from 1960 to 2025, and covering 156 distinct indicators. The data is sourced from the World Banks World Development Indicators (WDI), which is the worlds most-cited reference for global development data, compiling officially-recognized international statistics from national accounts, government agencies, and partner organizations such as the IMF, WHO, FAO, UNESCO, ILO, and UN agencies. The topic focuses on Social Protection & Labor, including indicators like child employment in agriculture, employment in agriculture as a percentage of total employment, and employment-to-population ratios. Data is pulled directly from the World Banks public API (api.worldbank.org/v2) for every indicator tagged to this topic across all countries in the region, with records having no observed value dropped. Years are normalized to integers, and values are coerced to float64. Geographic coverage includes 54 Africa countries, such as South Africa, Egypt, Mauritius, and others. The dataset schema includes columns: indicator_id (World Bank WDI indicator code), indicator_name (human-readable indicator name), country_iso2 (ISO 3166-1 alpha-2 country code), country_iso3 (ISO 3166-1 alpha-3 country code, preferred join key), country_name (English country name as published by the World Bank), year (year of observation in CE), value (observed indicator value), unit (unit of measurement, often empty), and obs_status (World Bank observation-status flag, e.g., preliminary or estimated). Data quality notes indicate that records with null observations are filtered out at ingest, indicator coverage varies by country and year, not every (indicator × country × year) combination is present, and the dataset is filtered to individual sovereign states only. Repackaged by Electric Sheep Africa, it is part of a mission to provide a unified, ML-ready data layer for Africa on HuggingFace, enabling researchers and developers to start working quickly using load_dataset().

提供机构:
electricsheepafrica
搜集汇总
数据集介绍
electricsheepafrica/africa-worldbank-social-protection-labor 数据集图片
构建方式
该数据集源自世界银行世界发展指标(WDI)中社会保障与劳动领域的公开数据,由Electric Sheep Africa进行标准化重封装。构建过程以非洲54个国家为地理单元,系统采集1960至2025年间156项指标,累计115,409条观测记录,涵盖社会保障覆盖、劳动力参与、就业结构等维度。数据以Parquet格式存储,保留原始缺失值,并附带标准化元数据、来源说明及加载指南,确保分析者能够追溯至世界银行原始出处,同时获得面向非洲数据发现的增强索引。
特点
数据集以非洲大陆为专属覆盖范围,时间跨度逾六十年,兼具长时序与跨国比较优势。其核心特征包括:高维度指标结构(156项),涵盖社会保障与劳动市场的多元面向;规模适中(100K至1M行),适合中等粒度建模;提供标准化元数据与标签体系,便于检索与复用;以Parquet列式存储优化读取效率;标注CC BY 4.0开放许可,允许灵活使用与再分发。数据质量提示强调需在建模前核查变量定义与单位,避免仅凭标签推断政策含义。
使用方法
分析者可通过Hugging Face datasets库直接加载:调用load_dataset函数指定仓库名称,获取数据集字典后选取拆分,利用features查看字段结构,或转换为Pandas DataFrame进行表格分析。建议在建模前检查模式与缺失模式,按国家、年份和指标维度剖析变量分布,并可与其他Electric Sheep Africa数据集基于显式国家、年份字段进行连接。使用中应保留缺失值直至确立合理插补规则,并在可复现笔记本中同时引用世界银行原始来源与Electric Sheep Africa仓库。
背景与挑战
背景概述
世界银行世界发展指标(WDI)长期被誉为全球发展数据领域引用最广泛的权威参考,而面向非洲社会保护与劳动力议题的系统性、机器可读数据集长期处于分散状态。2026年,Electric Sheep Africa基于世界银行开放数据构建了该数据集,其核心研究问题在于将1960至2025年间54个非洲国家、156项社会保护与劳动力指标整合为可复现的分析资源,以支撑发展经济学、社会保障政策与劳动市场研究。该数据集以标准化元数据与Parquet格式发布,为非洲数据的可发现性与跨域比较提供了基础设施,对区域社会政策评估具有显著的赋能效应。
当前挑战
就领域问题而言,社会保护与劳动力数据的核心挑战在于指标定义与测量口径在跨国家、跨年份间的异质性,使得跨国比较与时间序列建模难以获得稳健结论;缺失值普遍且非随机,政策变动与统计能力差异进一步加剧数据不平衡。就构建过程而言,原始WDI数据来源多元、更新频率不一,需在清洗与标准化中保持单位、定义与方法论的一致性,同时应对元数据缺漏(如国家字段与上游发布者信息不完整)与地理标识不明确的问题。如何在保留缺失机制的前提下提供可复现的分析路径,亦是该数据集面临的重要工程挑战。
常用场景
经典使用场景
在非洲发展经济学与社会政策研究领域,该数据集凭借其覆盖54个非洲国家、跨越1960至2025年的115,409条观测记录,成为刻画社会保障与劳动力市场长期演变的基准性数据资源。研究者惯常将其用于构建面板数据模型,以考察各国在养老金覆盖、失业保护、劳动力参与率及非正规就业等156项指标上的时序变化与跨国差异。典型的分析流程包括:按国家与年份对指标进行对齐,处理缺失值并统一量纲,继而运用固定效应或动态面板方法识别政策干预的滞后效应。该数据集亦常用于绘制区域热力图与趋势曲线,直观呈现非洲社会保障体系的扩张与收缩轨迹。
实际应用
在国际发展机构与非洲各国政策部门的实务工作中,该数据集为社会保障政策的规划、监测与评估提供了量化依据。世界银行、国际劳工组织及区域经济共同体可利用其指标面板,追踪全民社会保护目标下的进展缺口,识别覆盖不足的脆弱群体与地理区域。国别政策制定者能够借助劳动力参与率、青年失业率及养老金领取率等指标,校准就业促进计划与社会救助项目的优先序。非政府组织与人道主义机构则可将该数据与粮食安全、健康结果等外部数据集进行连接,优化资源投放策略。此外,数据科学团队可将其作为特征工程的基础层,构建面向非洲市场的风险评分与预警模型。
衍生相关工作
围绕该数据集已衍生出一系列具有影响力的分析与建模工作。在学术层面,研究者基于其长时段面板结构发表了关于非洲社会保护扩张与劳动力市场转型的跨国计量研究,部分成果被纳入世界银行旗舰报告的方法论附录。在数据工程层面,Electric Sheep Africa以此为枢纽,与非洲人口健康、教育及基础设施等主题数据集建立互操作接口,催生了多源异构数据的融合分析范式。在开源社区,该数据集被用于教学案例与可复现笔记本的开发,成为非洲发展数据科学课程的标准素材。此外,若干机器学习竞赛与政策模拟挑战赛亦以其为基准数据,推动了对缺失值插补与跨国预测方法的创新探索。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务