five

radicalization-TT-dataset

收藏
github2023-01-29 更新2024-05-31 收录
下载链接:
https://github.com/prabhakar267/radicalization-TT-dataset
下载链接
链接失效反馈
官方服务:
资源简介:
该数据集用于通过机器学习识别激进社交媒体帖子,特别是从Twitter上提取的数据,通过调查数据挖掘技术使用帖子中的标签。数据经过预处理,包括分词、词干提取和词形还原,并使用监督机器学习分类技术(如朴素贝叶斯、SVM、AdaBoost和随机森林)进行分类,以识别帖子的语言结构、文体和基于时间的模式。

This dataset is utilized for identifying radical social media posts through machine learning, specifically data extracted from Twitter, by investigating data mining techniques using hashtags within the posts. The data has undergone preprocessing, including tokenization, stemming, and lemmatization, and is classified using supervised machine learning classification techniques (such as Naive Bayes, SVM, AdaBoost, and Random Forest) to discern the linguistic structure, stylistic elements, and temporal patterns of the posts.
创建时间:
2017-05-21
原始信息汇总

数据集概述

数据集名称

Dataset Repository for "Identifying Radical Social Media Posts using Machine Learning"

数据集目的

本数据集旨在通过机器学习技术自动识别社交媒体上的激进帖子,以帮助政府和执法机构确保公民的安全和保障。

数据收集方法

数据集通过调查数据挖掘技术从Twitter上提取,主要利用帖子中的标签(hashtags)进行数据抽取。

数据预处理

数据预处理包括分词、词干提取和词形还原,以清理数据。

数据分类方法

使用监督机器学习分类技术(包括Naive Bayes、SVM、AdaBoost和Random Forest)对数据进行分类,区分激进与非激进帖子。

数据集特点

  • 识别激进帖子的语言结构、文体学和时间模式。
  • 应用多种机器学习算法进行分类。

相关链接

引用信息

@preprint{prabhakarRadicalPaper2017, author = {Gupta, Prabhakar and Varshney, Pulkit and P S Bhatia, M}, year = {2017}, month = {06}, pages = {}, title = {Identifying Radical Social Media Posts using Machine Learning}, doi = {10.13140/RG.2.2.15311.53926} }

搜集汇总
数据集介绍
main_image_url
构建方式
radicalization-TT-dataset的构建采用了基于Twitter平台的社交媒体数据挖掘技术。研究者通过使用特定的标签(hashtags)从Twitter上提取相关帖子,随后对这些数据进行预处理,包括分词、词干提取和词形还原等步骤,以确保数据的清洁和一致性。最终,数据集通过监督学习分类技术(如朴素贝叶斯、支持向量机、AdaBoost和随机森林)进行分类,将帖子标记为激进或非激进。
使用方法
使用radicalization-TT-dataset时,研究者可以直接加载预处理后的数据,利用提供的分类标签进行模型训练。数据集适用于多种机器学习算法的应用,特别是那些专注于文本分类和时间序列分析的模型。通过调整分类器的参数,研究者可以探索不同算法在识别激进内容上的表现,从而优化模型的性能。
背景与挑战
背景概述
在数字化时代,社交媒体已成为极端主义思想传播的重要平台,给全球安全带来了严峻挑战。radicalization-TT-dataset数据集由Prabhakar Gupta等人于2017年创建,旨在通过机器学习技术自动识别社交媒体上的激进内容。该数据集主要基于Twitter平台,利用标签挖掘技术提取数据,并通过预处理步骤如分词、词干提取和词形还原进行数据清洗。研究团队采用多种监督学习分类算法(如朴素贝叶斯、支持向量机、AdaBoost和随机森林)对数据进行分类,以识别激进与非激进帖子。该数据集为社交媒体内容监控和极端主义行为预测提供了重要支持,推动了相关领域的研究进展。
当前挑战
radicalization-TT-dataset数据集在解决社交媒体激进内容检测问题时面临多重挑战。首先,激进内容的定义具有主观性和动态性,导致数据标注的准确性和一致性难以保证。其次,社交媒体数据的噪声和多样性增加了数据预处理的复杂性,尤其是在多语言和跨文化背景下。此外,极端主义者在社交媒体上的行为模式不断演变,要求模型具备较强的适应性和泛化能力。在数据集构建过程中,研究团队还需应对数据隐私和伦理问题,确保数据采集和使用的合法性。这些挑战不仅影响了数据集的构建质量,也对后续模型的性能和应用效果提出了更高要求。
常用场景
经典使用场景
在社交媒体分析领域,radicalization-TT-dataset数据集被广泛应用于识别和分类极端主义内容。通过从Twitter等平台提取数据,该数据集利用机器学习技术对社交媒体帖子进行预处理和分类,帮助研究人员和执法机构自动化地检测潜在的激进言论。这一过程不仅提高了检测效率,还为后续的文本分析和模式识别提供了坚实的基础。
解决学术问题
该数据集解决了社交媒体中极端主义内容自动检测的难题。通过使用监督学习算法如朴素贝叶斯、支持向量机、AdaBoost和随机森林,研究人员能够有效地分类激进与非激进帖子。这一技术突破不仅提升了内容审核的准确性,还为理解极端主义言论的语言特征和时间模式提供了新的视角,推动了社交媒体安全领域的研究进展。
实际应用
在实际应用中,radicalization-TT-dataset数据集被广泛用于政府和执法机构的安全监控系统。通过自动化检测社交媒体上的激进内容,该数据集帮助相关部门及时识别潜在的威胁,预防极端主义活动的扩散。此外,社交媒体平台也可以利用这一技术增强内容审核机制,确保用户环境的安全与和谐。
数据集最近研究
最新研究方向
近年来,随着社交媒体平台的普及,极端主义内容的传播已成为全球安全领域的重要挑战。radicalization-TT-dataset的提出,为利用机器学习技术自动识别社交媒体上的激进内容提供了重要数据支持。该数据集通过从Twitter平台提取数据,并采用监督学习分类技术(如朴素贝叶斯、支持向量机、AdaBoost和随机森林)对激进与非激进内容进行分类,重点关注了文本的语言结构、风格特征以及时间模式。这一研究方向不仅为政府及执法机构提供了高效的内容监控工具,也为学术界在自然语言处理与社交媒体分析领域的交叉研究开辟了新路径。随着深度学习技术的进步,未来研究可能会进一步探索基于神经网络的模型,以提高分类精度并应对更复杂的语言表达形式。
以上内容由遇见数据集搜集并总结生成
5,000+
优质数据集
54 个
任务类型
进入经典数据集
二维码
社区交流群

面向社区/商业的数据集话题

二维码
科研交流群

面向高校/科研机构的开源数据集话题

数据驱动未来

携手共赢发展

商业合作