five

Code-170k-kinyarwanda

收藏
Hugging Face2025-10-30 更新2025-10-31 收录
下载链接:
https://huggingface.co/datasets/michsethowusu/Code-170k-kinyarwanda
下载链接
链接失效反馈
官方服务:
资源简介:
Code-170k-kinyarwanda是一个包含176,999个编程对话的数据集,这些对话最初来源于glaiveai/glaive-code-assistant-v2,并翻译成基尼亚鲁旺达语,使基尼亚鲁旺达语的使用者能够接触编程教育。数据集包含关于编程和编码的高质量对话,纯基尼亚鲁旺达语,覆盖各种编程概念的多轮对话,话题包括算法、数据结构、调试、最佳实践等,且适用于大型语言模型的指令微调。
创建时间:
2025-10-20
原始信息汇总

Code-170k-kinyarwanda 数据集概述

数据集基本信息

  • 数据集名称: Code-170k-kinyarwanda
  • 数据集地址: https://huggingface.co/datasets/michsethowusu/Code-170k-kinyarwanda
  • 许可证: Apache 2.0
  • 语言: 卢旺达语 (rw)
  • 数据规模: 100K<n<1M

数据集规格

  • 总样本数: 176,999
  • 训练集大小: 315,887,108 字节
  • 下载大小: 157,943,554 字节
  • 数据集格式: 对话格式

核心特征

  • 数据特征:
    • conversations: 对话列表
      • from: 说话者标识("human"或"gpt")
      • value: 卢旺达语消息内容
  • 数据来源: 基于glaiveai/glaive-code-assistant-v2翻译而来
  • 内容类型: 编程对话和编码相关内容

应用领域

  • 文本生成
  • 问答系统
  • 卢旺达语编程助手训练
  • 教育工具开发
  • 多语言代码生成研究
  • 低资源语言AI开发

数据集特点

  • 包含176,999个高质量的编程对话
  • 纯卢旺达语内容
  • 多轮对话格式
  • 涵盖算法、数据结构、调试、最佳实践等多样化编程主题
  • 适用于大语言模型的指令调优
搜集汇总
数据集介绍
构建方式
在编程教育领域,Code-170k-kinyarwanda数据集的构建采用了创新的跨语言迁移策略。该数据集源自glaiveai/glaive-code-assistant-v2的原始编程对话,通过专业翻译流程将17.7万条高质量对话精准转化为基尼亚卢旺达语。这种构建方式不仅保留了原始编程知识的专业性和准确性,还通过多轮对话结构完整呈现了算法设计、代码调试等编程概念,为低资源语言社区搭建了技术知识传播的桥梁。
特点
该数据集在低资源语言技术资料领域展现出显著特色。全部对话内容均采用纯正的基尼亚卢旺达语表述,涵盖数据结构、编程规范等多元技术主题。其多轮对话设计模拟真实编程辅导场景,每个对话单元包含人类提问与AI应答的完整交互序列。这种设计既保持了编程知识的技术深度,又通过本土化语言降低了学习门槛,为非洲语言群体的技术赋能提供了独特价值。
使用方法
在自然语言处理应用中,该数据集可通过Hugging Face生态便捷加载。开发者使用load_dataset函数即可调用完整训练集,每个数据样本以对话列表形式呈现,包含说话者标识和基尼亚卢旺达语内容。这种标准化格式特别适用于指令微调任务,能有效训练面向基尼亚卢旺达语用户的编程助手模型,推动多语言代码生成技术在教育场景的实践应用。
背景与挑战
背景概述
随着人工智能技术在编程教育领域的深入应用,多语言代码助手成为促进全球技术包容性的关键工具。Code-170k-kinyarwanda数据集由研究团队于2025年构建,基于glaiveai/glaive-code-assistant-v2的原始对话数据,通过专业翻译转化为基尼亚卢旺达语版本。该数据集聚焦于低资源语言的编程教育普及,通过17.7万条高质量对话覆盖算法设计、调试实践等核心编程概念,为非洲语言社区的开发者提供了本土化的学习资源,显著推动了多语言代码生成技术的均衡发展。
当前挑战
在编程教育领域,低资源语言常面临技术术语标准化与语义准确性难题,该数据集需解决基尼亚卢旺达语编程概念表达的精确性与上下文一致性挑战。构建过程中,专业翻译团队需克服编程术语在土著语言中的词汇空缺问题,同时确保多轮对话的逻辑连贯性。此外,数据规模的扩展受限于双语专家的稀缺性,且需维持原始代码逻辑与本土语言习惯的深度融合,这对质量校验流程提出了更高要求。
常用场景
经典使用场景
在低资源语言技术发展的背景下,该数据集最经典的使用场景是作为训练基鲁旺达语编程助手的核心语料。通过包含17.7万条高质量编程对话,它能够支持多轮对话的指令微调过程,覆盖算法设计、数据结构实现、代码调试等关键编程概念,为构建本土化智能编程教育工具奠定坚实基础。
解决学术问题
该数据集有效解决了低资源语言在自然语言处理领域长期面临的数据稀缺问题。通过将英文编程对话精准翻译为基鲁旺达语,它不仅填补了非洲语言编程语料的空白,还为研究多语言代码生成模型提供了重要实验平台,推动了语言技术公平性研究的深入发展。
衍生相关工作
该数据集已衍生出多项重要研究工作,包括基于多语言指令微调的代码生成模型构建、低资源语言机器翻译技术的优化,以及跨文化编程教育平台的开发。这些成果共同推动了全球语言技术生态的多样化发展,为其他低资源语言的技术创新提供了可复现的范式。
以上内容由遇见数据集搜集并总结生成
5,000+
优质数据集
54 个
任务类型
进入经典数据集
二维码
社区交流群

面向社区/商业的数据集话题

二维码
科研交流群

面向高校/科研机构的开源数据集话题

数据驱动未来

携手共赢发展

商业合作