five

laddermedia/srs-prompts, laddermedia/srs-highlights

收藏
github2026-04-21 更新2026-04-26 收录
下载链接:
https://github.com/laddermedia/memory-machines
下载链接
链接失效反馈
官方服务:
资源简介:
`laddermedia/srs-prompts`数据集:每行代表一个候选记忆提示,用于卡片级别的可提取性分类、奖励模型偏好对和`srs-highlights`的原始输入。`laddermedia/srs-highlights`数据集:每行代表一个高亮(所有候选提示分组),用于高亮级别的分级评估、SFT分级和掩码任务分级。

`laddermedia/srs-prompts` dataset: Each row represents a candidate memory prompt, serving as the raw input for card-level extractability classification, reward model preference pairs, and the `laddermedia/srs-highlights` dataset. `laddermedia/srs-highlights` dataset: Each row represents a highlight, which groups all candidate prompts, and is used for highlight-level hierarchical evaluation, SFT hierarchical classification, and mask task hierarchical grading.
创建时间:
2026-04-12
原始信息汇总

根据您提供的数据集详情页面信息,以下是对该数据集的总结:

数据集概述

该数据集项目名为 memory-machines,旨在研究和训练基于大语言模型(LLM)的记忆提示(闪卡)生成器,用于间隔重复学习。数据集通过 HuggingFace 组织 laddermedia 发布。

数据集构成

该项目包含两个主要数据集,它们具有不同的粒度和用途:

数据集名称 粒度 用途
laddermedia/srs-prompts 每行对应一个候选记忆提示(卡片级) 可提取性分类、奖励模型偏好对、srs-highlights 的原始输入
laddermedia/srs-highlights 每行对应一个高亮片段(所有候选提示分组在一起) 分级评估、SFT 分级、掩码任务分级

数据集构建关系

  • srs-highlights 数据集是基于 srs-prompts 数据集,通过 memory_machines.highlight.build_dataset 方法构建而成。

许可与引用

  • 许可证:Apache-2.0
  • 引用:如需使用该代码或关联数据集,请引用项目官方论文(详见项目页面)。
搜集汇总
数据集介绍
main_image_url
构建方式
srs-highlights数据集由laddermedia/srs-prompts数据集通过memory_machines.highlight.build_dataset模块构建而成。原始数据集srs-prompts以候选记忆提示为粒度,每行对应一个候选提示,包含可提取性分类、奖励模型偏好对等卡片级信息。srs-highlights在此基础上将每个高亮对应的所有候选提示聚合为一行,形成以高亮为粒度的结构,从而支撑从文本片段到记忆提示的映射关系分析。
特点
该数据集以高亮片段为基本单元,每个数据行封装了对应高亮下所有候选记忆提示的集合,具备层级化组织特性。它面向高亮级别的评估任务设计,支持分层分级评估(tiering evaluation)、监督微调(SFT tiering)以及掩码任务(masked task tiering),为基于间隔重复的记忆提示生成研究提供了多维度、细粒度的实验数据基础。
使用方法
研究人员可直接从HuggingFace平台加载laddermedia/srs-highlights数据集,用于训练和评估基于大语言模型的记忆提示生成器。典型应用包括:利用高亮-提示映射数据进行监督微调,提升模型从读者高亮中生成有效记忆卡片的能力;通过分级评估任务分析不同提示策略的效果;或执行掩码任务以探究模型对文本结构的理解。配套代码仓库memory-machines提供了完整的数据处理与模型训练管线。
背景与挑战
背景概述
在间隔重复学习领域,如何将阅读中的高亮内容有效转化为长效记忆卡片是核心挑战之一。srs-highlights数据集由Ozzie Kirkby和Andy Matuschak于2026年创建,旨在为基于大型语言模型的记忆提示生成器提供评估与训练基准。该数据集以文本高亮为单位,聚焦于高亮层级的层次化评估、监督微调层次划分及掩码任务层次分类,弥补了现有数据集在细粒度记忆提示生成评估方面的空白。通过将候选记忆提示进行分组,srs-highlights为研究者提供了更精确的训练与评测工具,推动了间隔重复系统与自然语言处理的交叉发展。
当前挑战
srs-highlights数据集面临的核心挑战包括:首先,领域问题层面,现有间隔重复系统依赖人工设计记忆提示,难以规模化生成高质量、个性化内容,且高亮文本到有效卡片的转化率低下,导致学习者记忆效率受限。其次,构建过程中,如何从大规模阅读高亮中自动筛选出具有长期记忆价值的片段,并确保生成提示的多样性、准确性与难度匹配,是技术难点。此外,高亮文本的语义歧义、上下文依赖以及用户个性化记忆策略的差异,均增加了数据标注与模型泛化的复杂性。数据集的层次化结构设计虽提升了评估粒度,但也同步带来了跨层级一致性与任务对齐的挑战。
常用场景
经典使用场景
在人工智能与教育技术交叉融合的前沿领域,srs-highlights 数据集专门服务于基于间隔重复(Spaced Repetition System, SRS)的记忆提示生成研究。其经典场景是以读者高亮文本为输入单元,将一段文本中的多个候选记忆提示(prompt)汇聚为一条高亮记录,用于训练和评估大语言模型(LLM)生成高质量闪卡的能力。研究者利用该数据集中的高亮层级结构,开展模型在不同粒度上的生成效果对比、提示优先级排序以及掩码任务训练,从而系统性地优化从原始阅读标记到可复用记忆间隔卡片的全自动转化流程。
解决学术问题
该数据集着力解决了学术界在自动化记忆辅助工具构建中面临的三大核心问题:其一,缺乏从自然阅读行为(如高亮标记)到结构化记忆提示的高质量对齐数据;其二,现有工作多聚焦于点状提示分类,忽视了高亮层级中多提示间的竞争与互补关系;其三,缺少支撑模型进行提示质量分级(tiering)与偏好对齐的标准化评测基准。通过提供高亮级别的分组评价数据、SFT微调样本及掩码任务实例,srs-highlights填补了从阅读产出到记忆工程的数据鸿沟,为构建能主动筛选并优化记忆触发机制的智能化学习系统奠定了关键数据基础。
衍生相关工作
围绕 srs-highlights 数据集已衍生出多项具有影响力的研究工作。原始论文《Memory Machines: Can LLMs create lasting flashcards from readers' highlights?》率先提出了从高亮到闪卡的自动化生成框架,并利用该数据集验证了大型语言模型在提示优先级分层与掩码任务上的有效性。随后涌现的工作包括:基于偏好对齐的提示生成优化(如使用奖励模型进行强化学习微调)、跨语言记忆提示生成模型的复现与扩展,以及将高亮层级数据用于多模态阅读场景的迁移学习。这些衍生工作共同验证了该数据集在连接自然阅读行为与结构化记忆编排之间的核心桥梁作用,推动了教育人工智能中数据驱动的个性化复习技术发展。
以上内容由遇见数据集搜集并总结生成
二维码
社区交流群
二维码
科研交流群
商业服务