UGPhysics
收藏arXiv2025-09-30 收录
下载链接：
https://github.com/YangLabHKUST/UGPhysics
下载链接
链接失效反馈官方服务：
资源简介：
该数据集名为UGPhysics，是一个大规模且全面的基准测试，专门用于评估大型语言模型在本科物理推理方面的能力。它包含了5,520个本科物理问题，这些问题以中英双语呈现，覆盖了13个学科领域，包含七种不同的答案类型和四种不同的物理推理技能。此外，该数据集在数据泄露方面经过了严格筛选，并配备了模型辅助的基于规则的判断（MARJ）管道，以评估答案的正确性。该数据集的规模为5,520个问题，任务旨在评估大型语言模型在物理推理能力方面的表现。
提供机构：
YangLabHKUST
