five

EthioMT

收藏
arXiv2024-03-28 更新2024-08-06 收录
下载链接:
http://arxiv.org/abs/2403.19365v1
下载链接
链接失效反馈
官方服务:
资源简介:
EthioMT是一个专为15种低资源埃塞俄比亚语言设计的平行语料库,由国立理工学院创建。该数据集包含从宗教网站收集的文本数据,以及从公开数据集中整合的Amharic, Afaan Oromo, Somali, 和Tigrinya语言数据。创建过程中使用了网络爬虫技术,通过Python库进行数据提取和句子对齐。EthioMT旨在解决埃塞俄比亚语言在自然语言处理领域的资源匮乏问题,特别是机器翻译任务,以促进这些语言的研究和应用开发。

EthioMT is a parallel corpus developed for 15 low-resource Ethiopian languages, created by the National Polytechnic Institute. This dataset encompasses text data collected from religious websites, alongside language data of Amharic, Afaan Oromo, Somali and Tigrinya integrated from public datasets. During its development, web crawling technology was adopted, and Python libraries were utilized for data extraction and sentence alignment. EthioMT aims to address the resource scarcity issue of Ethiopian languages in the field of natural language processing, particularly for machine translation tasks, so as to advance the research and application development of these languages.
提供机构:
国立理工学院
创建时间:
2024-03-28
5,000+
优质数据集
54 个
任务类型
进入经典数据集
二维码
社区交流群

面向社区/商业的数据集话题

二维码
科研交流群

面向高校/科研机构的开源数据集话题

数据驱动未来

携手共赢发展

商业合作