遇见数据集

ybyby624/wiki-fixed

收藏
Hugging Face2026-04-28 更新2026-05-03 收录
官方服务:

资源简介:

该仓库包含一个固定的维基语料库,基于wiki-18语料库,并补充了HotpotQA、2WikiMultiHopQA和Musique数据集。与原始Wiki-18语料库相比,此版本包含295,311个新文档,这些文档对于回答上述三个数据集的问题至关重要。语料库已使用Qwen3-8B-Embedding进行嵌入,提供了4096维版本,并支持通过脚本调整维度以适应不同计算资源需求。

This repo contains the fixed wiki corpus, which is based on the wiki-18 corpus and supplemented by the HotpotQA, 2WikiMultiHopQA, Musique datasets. Comparing with the original Wiki-18 corpus, this version contains 295,311 new documents which are critical for answering the question for the above three datasets. The corpus is embedded with the Qwen3-8B-Embedding, providing a 4096-dimension version and supporting dimension adjustment via script to accommodate varying computational resources.

提供机构:
ybyby624
二维码
社区交流群
二维码
科研交流群
商业服务