five

移动短视频平台行为、属性与内容大规模数据集|移动短视频数据集|用户行为分析数据集

收藏
arXiv2025-02-09 更新2025-02-12 收录
移动短视频
用户行为分析
下载链接:
https://github.com/tsinghua-fib-lab/ShortVideo_dataset
下载链接
链接失效反馈
资源简介:
本数据集由清华大学电子工程系提供,包含来自真实移动短视频平台的用户行为、属性和视频内容。数据集覆盖了10,000名志愿者的153,561个视频,具有丰富的用户行为和属性数据,以及视频内容特征。数据集旨在支持用户建模、社会科学、人类行为理解等领域的研究,特别是在改进用户建模和减轻AI算法带来的负面影响方面。
提供机构:
清华大学电子工程系
创建时间:
2025-02-09
AI搜集汇总
数据集介绍
main_image_url
构建方式
本研究团队从实际移动短视频平台中收集了包含丰富用户行为、属性和视频内容的大规模数据集。数据集构建过程中,研究人员首先招募了10,000名志愿者,并在其移动设备上安装了代理软件以记录用户与视频的互动行为。数据收集严格遵循隐私和伦理规范,确保用户信息匿名化处理。数据集涵盖了用户与视频的1,019,568条互动记录,规模之大超过多数现有公开数据集。在构建用户和视频属性时,采用K-means聚类对视频标题进行分类,并手动标注类别信息,形成了3级层次的视频类别体系,同时收集了用户的性别、年龄、地理位置等人口统计信息和设备价格等属性。
特点
本数据集的特点在于:一是数据规模大,涵盖了10,000名用户的153,561个视频互动;二是数据维度丰富,包含用户行为、属性和视频内容等多维度信息;三是数据质量高,通过技术验证保证了互动行为和属性数据的丰富性以及内容数据的质量;四是应用前景广,可支持用户建模、社会科学、人类行为理解等广泛研究。
使用方法
使用本数据集时,研究人员可以访问GitHub上的完整数据集和代码,以便进行数据特性分析和模型训练。数据集分为训练集、验证集和测试集,可用于推荐算法的基准测试,也可用于研究用户在平台上的过滤器泡沫现象等。用户在使用数据集时需遵循相关隐私和伦理规范,确保研究目的的合法性和数据使用的合规性。
背景与挑战
背景概述
移动短视频平台行为、属性与内容大规模数据集是由清华大学电子工程系的研究人员于2025年创建的。该数据集汇集了来自真实移动短视频平台的丰富用户行为、属性和视频内容,旨在解决现有数据集中用户视频反馈不足、用户属性有限以及视频内容缺失的问题。该数据集涵盖了10,000名志愿者的1,019,568次互动,以及153,561个视频,其规模之大在同类数据集中位居前列。数据集的创建严格遵循隐私和伦理规定,并为用户建模、社会科学、人类行为理解等领域的研究提供了强有力的支撑。
当前挑战
该数据集在构建过程中主要面临以下挑战:1)如何充分捕获和记录用户在短视频平台上的多样化行为;2)如何在保护用户隐私的前提下,收集和整合用户的多维度属性信息;3)如何有效地获取和表示视频内容,以支持多模态的用户建模。此外,数据集在解决领域问题方面的挑战包括:如何利用该数据集改进用户建模,减轻AI算法带来的负面效应,例如回声室效应和过滤器泡沫现象。
常用场景
经典使用场景
移动短视频平台行为、属性与内容大规模数据集被广泛应用于短视频平台用户行为分析、推荐算法优化及社交网络研究等领域。该数据集通过记录用户与视频的互动行为、用户属性以及视频内容,为研究人员提供了一种全面的研究工具,使得在用户建模、社交科学、人类行为理解等方面的工作得以深入开展。
解决学术问题
该数据集解决了现有数据集中用户视频反馈不足、用户属性信息有限以及缺乏视频内容等问题。通过提供丰富的用户行为数据、详细的用户和视频属性信息以及视频内容,该数据集有助于学术研究中对用户行为的深入理解,为推荐算法的改进提供了有力支持,并促进了信息过滤泡沫现象的研究。
衍生相关工作
基于该数据集,研究者们已经开展了一系列相关工作,如多模态推荐算法的研究、用户行为模式分析、社交网络中的信息传播研究等。这些衍生工作不仅推动了短视频平台相关技术的进步,也为社交网络分析和推荐系统研究提供了新的视角和数据支持。
以上内容由AI搜集并总结生成
用户留言
有没有相关的论文或文献参考?
这个数据集是基于什么背景创建的?
数据集的作者是谁?
能帮我联系到这个数据集的作者吗?
这个数据集如何下载?
点击留言
数据主题
具身智能
数据集  4098个
机构  8个
大模型
数据集  439个
机构  10个
无人机
数据集  37个
机构  6个
指令微调
数据集  36个
机构  6个
蛋白质结构
数据集  50个
机构  8个
空间智能
数据集  21个
机构  5个
5,000+
优质数据集
54 个
任务类型
进入经典数据集
热门数据集

基于站点观测的中国1km土壤湿度日尺度数据集(2000-2022)

本研究提供了中国范围1km高质量的土壤湿度数据集-SMCI1.0(Soil Moisture of China by in situ data, version 1.0),SMCI1.0是包含2000-2022年、日尺度、以10厘米为间隔10层深度(10-100cm)的高时空分辨率土壤湿度,数据单位为0.001m³/m³,缺失值为-999,投影为WGS1984。该数据集是以中国气象局提供的1,648个站点观测10层土壤湿度作为基准,使用ERA5_Land气象强迫数据、叶面积指数(LAI)、土地覆盖类型(Landtypes)、地形(DEM)和土壤特性(Soil properties)作为协变量,通过机器学习方式获得。本研究进行了两组实验以验证SMCI1.0的精度,时间尺度上:ubRMSE为0.041-0.052,R为0.883-0.919;空间尺度上:ubRMSE为0.045-0.051,R为0.866-0.893。 由于SMCI1.0是基于实地观测的土壤湿度,它可以作为现有基于模型和卫星数据集的有效补充。该数据产品可用于各种水文、气象、生态分析和建模,尤其在需要高质量、高分辨率土壤湿度的应用上至关重要。有关数据集的引用及详细描述,请阅读说明文档。为便于使用,本研究提供了两种不同分辨率的版本:30 秒(~1km)和0.1度(~9km)。

国家青藏高原科学数据中心 收录

OpenSonarDatasets

OpenSonarDatasets是一个致力于整合开放源代码声纳数据集的仓库,旨在为水下研究和开发提供便利。该仓库鼓励研究人员扩展当前的数据集集合,以增加开放源代码声纳数据集的可见性,并提供一个更容易查找和比较数据集的方式。

github 收录

中国气象数据

本数据集包含了中国2023年1月至11月的气象数据,包括日照时间、降雨量、温度、风速等关键数据。通过这些数据,可以深入了解气象现象对不同地区的影响,并通过可视化工具揭示中国的气温分布、降水情况、风速趋势等。

github 收录

中国食物成分数据库

食物成分数据比较准确而详细地描述农作物、水产类、畜禽肉类等人类赖以生存的基本食物的品质和营养成分含量。它是一个重要的我国公共卫生数据和营养信息资源,是提供人类基本需求和基本社会保障的先决条件;也是一个国家制定相关法规标准、实施有关营养政策、开展食品贸易和进行营养健康教育的基础,兼具学术、经济、社会等多种价值。 本数据集收录了基于2002年食物成分表的1506条食物的31项营养成分(含胆固醇)数据,657条食物的18种氨基酸数据、441条食物的32种脂肪酸数据、130条食物的碘数据、114条食物的大豆异黄酮数据。

国家人口健康科学数据中心 收录

中国高分辨率高质量PM2.5数据集(2000-2023)

ChinaHighPM2.5数据集是中国高分辨率高质量近地表空气污染物数据集(ChinaHighAirPollutants, CHAP)中PM2.5数据集。该数据集利用人工智能技术,使用模式资料填补了卫星MODIS MAIAC AOD产品的空间缺失值,结合地基观测、大气再分析和排放清单等大数据生产得到2000年至今全国无缝隙地面PM2.5数据。数据十折交叉验证决定系数R2为0.92,均方根误差RMSE为10.76 µg/m3。主要范围为整个中国地区,空间分辨率为1 km,时间分辨率为日、月、年,单位为µg/m3。注意:该数据集持续更新,如需要更多数据,请发邮件联系作者(weijing_rs@163.com; weijing@umd.edu)。 数据文件中包含NC转GeoTiff的四种代码(Python、Matlab、IDL和R语言)nc2geotiff codes。

国家青藏高原科学数据中心 收录