Putnam-AXIOM
收藏anonymous.4open.science2024-11-01 更新2025-01-06 收录
下载链接:
https://anonymous.4open.science/r/putnam-axiom-B57C/README.md
下载链接
链接失效反馈官方服务:
资源简介:
斯坦福研究团队提出了Putnam-AXIOM基准,专用于评估模型在解决复杂数学问题上的能力。该基准的原始数据集涵盖了1985-2023年William Lowell Putnam数学竞赛的236个问题。这些题目涵盖了11个不同数学领域的问题,团队也进行了筛选,确保能产生便于自动化评估的答案。同时,他们还借鉴MATH数据集的方法进行模型评估,并设计了一个等价函数,可以解决字符串不一致问题、和复杂的数学等价同质化问题。除此之外,为防止模型在训练过程中遇到Putnam原问题而出现评估偏差,团队还引入了功能变异构建变异数据集。
提供机构:
斯坦福大学
创建时间:
2024-11-01
搜集汇总
数据集介绍

背景与挑战
背景概述
该数据集对应一个GitHub仓库,但仓库为空且已过期,无法获取有效的数据集内容或详细信息。
以上内容由遇见数据集搜集并总结生成



