ibm-research/Wikipedia_contradict_benchmark
收藏Hugging Face2025-01-30 更新2025-04-12 收录
下载链接：
https://hf-mirror.com/datasets/ibm-research/Wikipedia_contradict_benchmark
下载链接
链接失效反馈官方服务：
资源简介：
Wikipedia contradict benchmark是一个包含253个人工标注的实例的数据集，旨在评估当增强包含现实世界知识冲突的检索段落时LLM的性能。数据集包括一个问题，一对从维基百科中提取的相互矛盾的段落，以及两个不同的答案，每个答案都来自段落。数据集以CSV格式提供，方便研究人员使用。数据集的创建是为了评估LLM在处理来自维基百科的相互矛盾的信息时的表现。
Wikipedia contradict benchmark is a dataset consisting of 253 high-quality, human-annotated instances designed to assess LLM performance when augmented with retrieved passages containing real-world knowledge conflicts. The dataset was created intentionally with that task in mind, focusing on a benchmark consisting of high-quality, human-annotated instances.
提供机构：
ibm-research
