ptb_text_only
收藏Opencsg2024-07-19 更新2025-05-03 收录
下载链接:
https://www.opencsg.com/datasets/AIWizards/ptb_text_only
下载链接
链接失效反馈官方服务:
资源简介:
Penn Treebank主要提供1989年华尔街日报的文本数据,规模约为百万词,主要用于语言建模任务。该数据集中的罕见词已被替换为`<unk>`标记,数字被替换为`<N>`标记。数据来源于原始文本,并由专家进行标注。使用者需注意其授权许可,仅供研究目的使用。
创建时间:
2024-07-19



