Thorsten-Voice/TV-24kHz-Neutral-tokenised
收藏Hugging Face2025-12-12 更新2025-12-20 收录
下载链接:
https://hf-mirror.com/datasets/Thorsten-Voice/TV-24kHz-Neutral-tokenised
下载链接
链接失效反馈官方服务:
资源简介:
该数据集是一个用于训练和微调Orpheus TTS模型家族的德语文本到语音标记化数据集。它基于大约12,000个来自原始Thorsten-Voice数据集(2022.10)的语音记录,并已重新采样到24 kHz,并使用Orpheus TTS预处理进行了标记化。数据集适用于训练和微调基于Orpheus的德语TTS模型、神经语音合成研究以及开放、无限制的TTS实验。数据集的语言是德语,说话者是Thorsten(单说话者)。音频处理细节包括重新采样到24,000 Hz,响度归一化到-24dB,并使用Orpheus TTS标记器进行标记化。数据集采用Creative Commons Zero(CC0 1.0)许可证发布,允许无限制的使用、修改、分发和构建。
This dataset is a tokenised German text-to-speech dataset created for training and fine-tuning the Orpheus TTS model family. It is based on approximately 12,000 speech recordings from the original Thorsten-Voice Dataset (2022.10) and has been resampled to 24 kHz and tokenised using Orpheus TTS preprocessing. This dataset is intended for training and fine-tuning Orpheus-based German TTS models, research on neural speech synthesis, and open, unrestricted TTS experimentation. The language of the dataset is German, and the speaker is Thorsten (single speaker). Processing details include audio resampled to 24,000 Hz, loudness normalized to -24dB, and tokenised using the Orpheus TTS tokenizer. The dataset is released under the Creative Commons Zero (CC0 1.0) license, allowing unrestricted use, modification, distribution, and building upon the dataset.
提供机构:
Thorsten-Voice搜集汇总
数据集介绍

构建方式
在语音合成领域,高质量、可复用的数据集是推动模型性能提升的关键基石。该数据集基于Thorsten-Voice 2022.10原始语料库,精选约12,000条德语语音录音,通过重新采样至24,000赫兹并执行-24分贝的响度归一化,确保了音频信号的标准化。随后,利用Orpheus TTS分词器对音频与文本进行对齐处理,生成包含input_ids、labels及attention_mask的结构化特征,最终以HuggingFace数据集格式存储,为Orpheus TTS模型家族提供即用型训练数据。
特点
该数据集的独特之处在于其专为Orpheus TTS架构优化,实现了从原始语音到分词序列的端到端适配。所有音频来源于单一德语男性说话人,保证了音色与发音风格的高度一致性,有利于模型学习稳定的声学特征。同时,采用CC0 1.0公共领域许可协议,完全开放用于商业及研究目的,消除了使用限制。此外,数据集规模适中,训练集包含12,451个样本,兼顾了训练效率与模型泛化能力。
使用方法
使用者可直接通过HuggingFace Datasets库加载该数据集,其预设的config名称'default'指向包含训练切分的文件路径。在模型训练时,需将input_ids作为输入特征、labels作为目标序列,配合attention_mask实现动态填充与掩码。该数据集适用于Orpheus TTS模型的微调或从头训练,开发者应确保环境中的Orpheus TTS分词器版本与数据集处理时一致(基于2025年12月代码库),以保持特征兼容性。
背景与挑战
背景概述
在语音合成领域,高质量的文本到语音(TTS)数据集是驱动神经声学模型发展的关键基石。Thorsten-Voice/TV-24kHz-Neutral-tokenised数据集由Thorsten-Voice项目于2022年10月创建,基于原始Thorsten-Voice语料库中约12,000条德语语音录音,经重采样至24kHz并采用Orpheus TTS预处理流水线进行标记化处理。该数据集专为训练和微调Orpheus TTS模型家族设计,聚焦于德语单说话人中性语音合成。其核心研究问题在于如何通过统一的标记化格式,提升跨模型迁移的兼容性与训练效率。作为开源社区的重要贡献,该数据集以CC0 1.0许可发布,为研究者提供了无限制的商用与研究可能性,有力推动了神经语音合成在德语领域的可重复性实验与创新。
当前挑战
该数据集所解决的领域问题集中于德语文本到语音合成中高质量单说话人数据的稀缺性,以及不同TTS模型架构间数据格式不兼容的痛点。通过将原始音频标准化为24kHz采样率与-24dB响度,并采用Orpheus TTS标记化方案,数据集有效降低了模型训练前的预处理复杂度。然而,构建过程中面临多重挑战:首先,原始Thorsten-Voice语料库包含约12,000条录音,其音频质量与内容多样性有限,可能影响模型对复杂语音模式的泛化能力;其次,标记化流程需严格对齐Orpheus TTS代码库的特定版本(截至2025年12月),版本迭代可能导致数据兼容性风险;最后,单说话人设计虽简化了训练,却限制了多说话人或多风格合成场景的适用性,需依赖后期数据增强或迁移学习策略弥补不足。
常用场景
经典使用场景
该数据集专为德语文本到语音合成任务而生,其核心应用场景在于训练与微调基于Orpheus TTS架构的神经语音合成模型。依托Thorsten-Voice项目提供的约12,000条高质量单说话人德语语音录音,经24kHz重采样、响度归一化及Orpheus专用分词器预处理后,数据集以token化形式直接服务于端到端语音生成管线。研究者可借助其标准化的输入输出特征(input_ids、labels、attention_mask)快速开展模型训练,尤其适合探索低资源语言下的高保真语音合成、说话人特征迁移以及多任务联合学习等前沿方向。
衍生相关工作
该数据集衍生了一系列围绕Orpheus TTS架构的经典工作,包括但不限于针对德语语音的韵律控制与情感表达增强研究、基于Token化表示的轻量级语音合成模型压缩方法,以及跨说话人语音风格迁移的探索。Thorsten-Voice项目本身作为开源生态的基石,催生了多个变体数据集(如不同采样率、不同情感标签的版本),并推动了德语语音合成从实验室研究向工业级应用的转化。此外,数据集的token化预处理流程与Jupyter Notebook工具链已被其他小语种TTS项目借鉴,成为构建可复现语音合成基准的参考范式。
数据集最近研究
最新研究方向
在神经语音合成领域,基于开源语音库的细粒度生成模型微调正成为前沿热点。Thorsten-Voice/TV-24kHz-Neutral-tokenised 数据集以约1.2万句德语中性语音为核心,经24kHz重采样与Orpheus TTS分词器预处理,为神经编解码与端到端文本转语音模型提供了高质量、低门槛的训练基础。该数据集紧密关联Orpheus TTS项目,后者致力于实现开放、可复现的语音合成研究,其tokenised形式直接适配最新生成式架构,显著降低了德语语音合成模型的开发复杂度。随着CC0许可的全面开放,该资源不仅推动了多语言语音合成技术的民主化进程,也为非英语语种的语音交互系统、无障碍工具及个性化语音克隆等应用提供了关键数据支撑,具有重要的科研与产业价值。
以上内容由遇见数据集搜集并总结生成



