BillionWordBenchmark
收藏OpenDataLab2026-05-24 更新2024-05-09 收录
下载链接：
https://opendatalab.org.cn/OpenDataLab/Billion_Word_Benchmark
下载链接
链接失效反馈官方服务：
资源简介：
十亿字数据集是用于语言建模的数据集。训练/保留数据是使用 Bash shell 和 Perl 脚本的组合从 WMT 2011 News Crawl 数据生成的。
提供机构：
OpenDataLab
创建时间：
2022-06-28
搜集汇总
数据集介绍
背景与挑战
背景概述
BillionWordBenchmark是一个用于语言建模的十亿字数据集，其训练和保留数据源自WMT 2011 News Crawl，并通过Bash和Perl脚本生成。该数据集由Google于2013年发布，旨在为统计语言模型提供基准测试。
以上内容由遇见数据集搜集并总结生成
