THU-KEG/Arena-Write
收藏官方服务：
资源简介：
Arena-Write是一个包含100个用户写作任务的小型基准数据集，用于在现实场景中评估长篇生成模型的性能。任务包括社交媒体帖子、散文和报告等多种格式，部分任务的输出长度要求超过2000个单词。
Arena-Write is a small-scale benchmark of 100 user writing tasks, designed to evaluate the performance of long-form generation models in realistic scenarios. It includes various formats such as social media posts, essays, and reports, with some tasks requiring outputs over 2,000 words.
提供机构：
THU-KEG搜集汇总
数据集介绍
背景与挑战
背景概述
Arena-Write是由清华大学知识工程组创建的小规模基准数据集，专注于评估长文本生成模型在多样化现实写作任务中的性能，包含100个任务，涵盖社区论坛、学术专著等多种类型，输出长度可达2000字以上。数据以JSON格式存储，提供基线模型响应，并采用成对比较和Elo评分进行模型评估，适用于文本生成研究和模型优化。
以上内容由遇见数据集搜集并总结生成
