MOCHA

Name: MOCHA
Creator: OpenDataLab
License: 暂无描述

OpenXLab2026-04-18 收录

下载链接：

https://openxlab.org.cn/datasets/OpenDataLab/MOCHA

下载链接

链接失效反馈

官方服务：

资源简介：

包含来自 6 个不同问答数据集的模型输出的 40K 人类判断分数和一组额外的用于评估的最小对。资料来源：MOCHA：用于训练和评估生成式阅读理解指标的数据集

提供机构：

OpenDataLab

创建时间：

2022-05-23

mocha

MOCHA旨在提供一个用于训练和评估生成式阅读理解指标的基准。它包含从6个不同的问答数据集中提取的4万个人工判断分数，以及用于评估的额外最小对。数据内容包括文章段落、问题、参考答案以及模型生成的候选答案，并附带人工评分。MOCHA支持训练用于阅读理解的评估指标，并提供训练、验证、测试和最小对等数据集划分。该数据集采用CC BY-SA 4.0授权许可。

OpenCSG2024-07-19 更新50

anthonychen/mocha

MOCHA数据集是一个用于训练和评估生成式阅读理解指标的基准数据集。它包含了来自6个不同问答数据集的40K人类评分，以及一组用于评估的最小对。MOCHA将阅读理解实例（包括段落、问题和参考答案）与候选答案和人类评分配对。通过MOCHA，研究人员训练了一个名为LERC的学习评估指标，以模仿人类评分。LERC在保留的注释上比基线指标高出10到36个绝对皮尔逊点，在最小对上的评估中达到了80%的准确率，

Hugging Face2024-01-18 更新230

MOCHA

MOCHA是由加州大学欧文分校和希伯来大学合作创建的数据集，旨在训练和评估生成式阅读理解度量标准。该数据集包含40,000个人类评分的模型输出，来自6个不同的问题回答数据集，以及一组额外的最小对用于评估。MOCHA通过收集大量的人类判断分数，训练了一个名为LERC的阅读理解评估度量，该度量能够模仿人类判断分数，显著优于现有度量。数据集的应用领域主要集中在提高生成式阅读理解模型的准确性和鲁棒性，解决

arXiv2020-10-16 更新180

MOCHA

OpenDataLab2026-07-05 更新60

mocha

Opencsg2024-07-19 更新90