Kannada-LLM-Labs/C4-Kn

这是一个过滤版本的C4数据集，仅包含卡纳达语样本。数据集总共包含1056849个训练样本和1039个验证样本。每个样本包括文本、时间戳和URL。

原始信息汇总

数据集概述

数据特征

• text: 数据类型为字符串。
• timestamp: 数据类型为时间戳（秒）。
• url: 数据类型为字符串。

数据分割

• train: 包含1056849个样本，总字节数为7772502793。
• validation: 包含1039个样本，总字节数为7579027。

数据集大小

• 下载大小: 3033462453字节。
• 数据集大小: 7780081820字节。

配置

• default:
  • train: 路径为data/train-*。
  • validation: 路径为data/validation-*。

数据样本

python {text: ಹಳ್ಳಿಯ ‘ಬೋಲ್ಟ್u200c’ಗಳನ್ನು ಗುರುತಿಸಿ | Prajavani ಪ್ರಜಾವಾಣಿ ವಾರ್ತೆ Updated: 18 ಫೆಬ್ರವರಿ 2020, 01:30 IST ಉಡುಪಿಯ ಐಕಳದಲ್ಲಿ ಇತ್ತೀಚೆಗೆ ನಡೆದ ಕಂಬಳದ ಓಟದಲ್ಲಿ ಶ್ರೀನಿವಾಸ ಗೌಡ ಎಂಬುವರು ವಿಶ್ವದ ವೇಗದ ಓಟಗಾರ ಉಸೇನ್ ಬೋಲ್ಟ್ ಅವರಿಗಿಂತಲೂ ವೇಗವಾಗಿ ಓಡಿ ಗುರಿ ತಲುಪಿದ್ದು, ಸಾರ್ವಜನಿಕರ ಮೆಚ್ಚುಗೆಗೆ ಪಾತ್ರರಾಗಿದ್ದಾರೆ. ಗ್ರಾಮೀಣ ಪ್ರದೇಶ ಗಳಲ್ಲಿ ಇರುವ ಇಂತಹ ಓಟಗಾರರು ಮತ್ತು ಆಟಗಾರರು ಎಲೆಮರೆಯ ಕಾಯಿಯಂತೆ ತಮ್ಮ ಪಾಡಿಗೆ ತಾವು ಬೆಳೆಯುತ್ತಿರುತ್ತಾರೆ. ಶಾಲಾ- ಕಾಲೇಜುಗಳಲ್ಲಿ ಓದುತ್ತಿರುವವರಿಗೆ ಮುಂದೆ ಬರಲು ಸ್ವಲ್ಪಮಟ್ಟಿಗಾದರೂ ಅವಕಾಶ ಇರುತ್ತದೆ. ಅವಿದ್ಯಾವಂತರಿಗೆ ಅದೂ ಇಲ್ಲ. ಇನ್ನು ಕ್ರೀಡಾಕೂಟಗಳಿಗೆ......., timestamp: datetime.datetime(2020, 4, 1, 16, 50, 10), url: https://www.prajavani.net/op-ed/readers-letter/need-more-publicity-to-kambala-sports-706114.html}