five

SmolLM2-intermediate-evals

收藏
魔搭社区2025-12-04 更新2025-09-13 收录
下载链接:
https://modelscope.cn/datasets/HuggingFaceTB/SmolLM2-intermediate-evals
下载链接
链接失效反馈
官方服务:
资源简介:
Evaluation of the intermediate checkpoints of SmollM2-1.7B from 0 to 5T tokens every ~2k steps (4B tokens).

对SmollM2-1.7B模型在0至5万亿Token训练过程中的所有中间检查点,以约每2000步(对应40亿Token)的间隔开展评估。
提供机构:
maas
创建时间:
2025-09-08
搜集汇总
数据集介绍
main_image_url
背景与挑战
背景概述
该数据集用于评估SmolLM2-1.7B模型在训练过程中的中间检查点,覆盖从初始到5T tokens的范围。检查点以约2k步(相当于4B tokens)的间隔进行记录,旨在监控模型在不同训练阶段的性能变化。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务