M3SCIQA是由耶鲁大学和Allen Institute for AI共同创建的多模态、多文档科学问答基准数据集,旨在全面评估基础模型在科学文献理解中的表现。该数据集包含1452个专家注释的问题,涵盖70个自然语言处理论文集群,每个集群包含一个主论文及其所有引用的文档。数据集的创建过程模拟了科学研究中的比较分析工作流程,要求模型在多个文档和多种数据格式(如图表)之间进行跨引用和推理。M3SCIQ
The dataset contains 23 multimodal recordings of string quartet performance. Acquired data includes the audio of each performance in separate tracks: up to two ambient tracks and individual tracks acq