SpeechRE

关系提取的重点是从非结构化的书面文本数据中提取实体之间的语义关系。然而，随着大量语音数据的快速增长，从语音中提取关系是一个重要但尚未得到充分探索的问题。在本文中，我们提出了一种新的信息提取任务-语音关系提取 (SpeechRE)。为了促进进一步的研究，我们构建了第一个综合训练数据集，以及第一个以英语为母语的人说测试集。我们通过两种方法为SpeechRE建立了强大的基线性能。流水线方法将预训练的ASR模块与基于文本的关系提取模块连接起来。端到端方法采用跨模态编码器-解码器体系结构。我们的综合实验揭示了这些方法的相对优势和劣势，并阐明了SpeechRE研究的重要未来方向。