pythia-memorized-evals
收藏魔搭社区2025-10-09 更新2025-08-23 收录
下载链接：
https://modelscope.cn/datasets/EleutherAI/pythia-memorized-evals
下载链接
链接失效反馈官方服务：
资源简介：
# Dataset Card for "pythia-memorized-evals"
[More Information needed](https://github.com/huggingface/datasets/blob/main/CONTRIBUTING.md#how-to-contribute-to-the-dataset-cards)
# "pythia-memorized-evals" 数据集卡片
[需补充更多信息](https://github.com/huggingface/datasets/blob/main/CONTRIBUTING.md#how-to-contribute-to-the-dataset-cards)
提供机构：
maas创建时间：
2025-08-16
搜集汇总
数据集介绍
背景与挑战
背景概述
该数据集用于评估Pythia模型对训练序列的记忆情况，记录了模型在给定前32个令牌提示下能精确生成后续32个令牌的序列。它包含多个模型大小和变体的分割，分析显示记忆量随模型规模和训练进程增加，但去重数据可降低记忆比例。
以上内容由遇见数据集搜集并总结生成
