SpokenSTS

用于测试语义句子级嵌入的语义文本相似性数据集的口语版本。包含数千个由人类标注的语义相似性句子对。口语句子可用于句子嵌入模型中，以测试您的模型是否学会捕捉句子语义。所有句子均以 6 种合成 Wavenet 语音和 4 种真实语音中的子集 (5%) 录制在声音衰减的展位中。可在 https://github.com/DannyMerkx/speech2image/tree/Interspeech21 获得训练视觉基础口语句子嵌入模型和评估代码的代码

搜集汇总

背景与挑战

背景概述

SpokenSTS是一个口语版本的语义文本相似性数据集，旨在测试句子嵌入模型对语义的捕捉能力，包含数千个人工标注的句子对，录制时采用了合成和真实语音。数据集可用于模型评估，相关代码和论文已公开提供。