acloudfan/lunarian-fictious-language
收藏Hugging Face2023-12-23 更新2024-03-04 收录
下载链接：
https://hf-mirror.com/datasets/acloudfan/lunarian-fictious-language
下载链接
链接失效反馈官方服务：
资源简介：
这是一个用于练习训练现有预训练分词器的样本数据集。背景信息提到科学家发现了一个新部落，该部落崇拜天体（月亮是他们的神），并使用一种称为lunarian的语言。科学家决定构建一个大型语言模型（LLM）来帮助他们与部落进行交流，该模型将执行lunarian到英语的翻译任务。我们的任务是训练一个基于BERT的现有分词器，新分词器将用于训练LLM。
这是一个用于练习训练现有预训练分词器的样本数据集。背景信息提到科学家发现了一个新部落，该部落崇拜天体（月亮是他们的神），并使用一种称为lunarian的语言。科学家决定构建一个大型语言模型（LLM）来帮助他们与部落进行交流，该模型将执行lunarian到英语的翻译任务。我们的任务是训练一个基于BERT的现有分词器，新分词器将用于训练LLM。
提供机构：
acloudfan
原始信息汇总
数据集概述
背景
科学家发现了一个新部落，该部落崇拜天体（月亮是他们的神），并使用一种称为“lunarian”的语言。科学家决定构建一个大型语言模型（LLM）以帮助与该部落沟通，该模型将执行lunarian-to-english翻译。
任务
我们的任务是训练一个基于BERT的现有分词器。新的分词器将用于训练LLM。
