hf-internal-testing/tokenizers_test_data

Name: hf-internal-testing/tokenizers_test_data
Creator: hf-internal-testing
Published: 2025-10-27 17:43:57
License: 暂无描述

Hugging Face2025-10-27 更新2026-01-03 收录

下载链接：

https://hf-mirror.com/datasets/hf-internal-testing/tokenizers_test_data

下载链接

链接失效反馈

官方服务：

资源简介：

--- license: apache-2.0 ---

提供机构：

hf-internal-testing

hf-internal-testing/tokenization_test_data

--- license: apache-2.0 pretty_name: Tokenization Test Data --- # Dataset Card for Dataset Name This dataset card aims to be a base template for new

Hugging Face2025-05-08 更新30

hf-internal-testing/dailytalk-dummy

该数据集包含了会话信息，每个会话包含多个回合，每个回合有说话者ID、文本内容和对应的音频信息。数据集分为训练集，提供了相应的字节数和示例数量。音频的采样率为24000Hz。

Hugging Face2025-05-05 更新50

hf-internal-testing/fixtures_docvqa

该数据集包含2个来自DocVQA数据集的文档图像，用于测试HuggingFace Transformers库中的LayoutLMv2FeatureExtractor和LayoutLMv2Processor。这些图像在`tests/test_feature_extraction_layoutlmv2.py`和`tests/test_processor_layoutlmv2.py`文件中使用。

Hugging Face2023-09-18 更新80

hf-internal-testing/image-matching-test-dataset

--- dataset_info: features: - name: image dtype: image splits: - name: train num_bytes: 971269.0 num_examples: 3 download_size: 972387 dataset_size: 971269.0 configs: - config_

Hugging Face2024-11-17 更新40

hf-internal-testing/fixtures_ocr

该数据集包含两张图像，分别来自IAM手写数据库和SRIOE数据集。这些图像用于测试HuggingFace Transformers库中的OCR模型，特别是在`test_modeling_vision_encoder_decoder_model.py`文件中测试TrOCR模型。

Hugging Face2025-06-20 更新110