SceMQA

SceMQA是由圣母大学等机构创建的一个针对大学入学水平的科学多模态问答基准。该数据集包含1045个问题，涵盖数学、物理、化学和生物四个核心科学科目，采用多选和自由回答两种格式。SceMQA特别强调对每个问题的详细解答和特定知识点的分类，以促进对AI模型能力的全面评估。此外，数据集还设计了同一上下文下的不同问题，以更深入和准确地评估推理能力。SceMQA旨在填补现有基准在高中至大学预科阶段的教育空白，推动AI在科学领域的应用和发展。