caltonji/harrypotter_squad_v2_2
收藏Hugging Face2021-12-31 更新2024-03-04 收录
下载链接：
https://hf-mirror.com/datasets/caltonji/harrypotter_squad_v2_2
下载链接
链接失效反馈官方服务：
资源简介：
## Dataset Summary
Contains 15 Harry Potter trivia questions in Squadv2 format, 3 of which are unanswerable.
## Model Performance
[Test Notebook](https://colab.research.google.com/drive/1VFUJKV7eun68XgQDAHSHsbvoM_CGHzWA?usp=sharing)
| Model | exact | f1 |
| ----------- | ----------- | ----------- |
| Albert Base ([twmkn9/albert-base-v2-squad2](https://huggingface.co/twmkn9/albert-base-v2-squad2)) | 46.6667 | 46.6667 |
| Albert XXLarge ([ahotrod/albert_xxlargev1_squad2_512](https://huggingface.co/ahotrod/albert_xxlargev1_squad2_512)) | 66.6667 | 66.6667 |
提供机构：
caltonji
原始信息汇总
数据集概述
本数据集包含15个关于哈利波特的问答题目，采用Squadv2格式，其中3个问题无法回答。
模型性能
| 模型名称 | 精确匹配 | F1分数 |
|---|---|---|
| Albert Base (twmkn9/albert-base-v2-squad2) | 46.6667 | 46.6667 |
| Albert XXLarge (ahotrod/albert_xxlargev1_squad2_512) | 66.6667 | 66.6667 |
