five

Holistic Video Understanding Dataset|视频理解数据集|数据分析数据集

收藏
github2024-05-13 更新2024-05-31 收录
视频理解
数据分析
下载链接:
https://github.com/holistic-video-understanding/HVU-Dataset
下载链接
链接失效反馈
资源简介:
这是一个大规模的整体视频理解数据集,用于支持视频内容的全面分析。数据集包含从YouTube获取的视频ID及其注释,存储格式为CSV。

This is a large-scale holistic video understanding dataset designed to support comprehensive analysis of video content. The dataset includes video IDs and their annotations sourced from YouTube, stored in CSV format.
创建时间:
2019-11-14
原始信息汇总

Holistic Video Understanding Dataset 概述

数据集名称

  • Holistic Video Understanding Dataset

数据集描述

  • 该数据集用于大规模整体视频理解研究。

相关文献

  • 论文标题: Large Scale Holistic Video Understanding
  • 发表会议: European Conference on Computer Vision 2020
  • 作者: Ali Diba, Mohsen Fayyaz, Vivek Sharma, Manohar Paluri, Jürgen Gall, Rainer Stiefelhagen, Luc Van Gool
  • 引用信息: latex @inproceedings{hvu, title={Large Scale Holistic Video Understanding}, author={Diba, Ali and Fayyaz, Mohsen and Sharma, Vivek and Paluri, Manohar and Gall, J{"u}rgen and Stiefelhagen, Rainer and Van Gool, Luc}, booktitle={European Conference on Computer Vision}, pages={593--610}, year={2020}, organization={Springer} }

数据集内容

  • 视频ID和注释: 存储在CSV格式中。

数据集下载

访问测试视频和缺失视频

  • 通过填写 此表单 获取测试视频和缺失视频。
AI搜集汇总
数据集介绍
main_image_url
构建方式
Holistic Video Understanding Dataset(HVU)的构建基于大规模视频数据的全面理解需求,通过从YouTube平台采集视频,并结合多层次的标注信息,形成了这一综合性的视频理解数据集。该数据集不仅涵盖了视频的基本属性,还包含了丰富的语义标签,如动作、场景、对象等,以支持多维度的视频分析任务。
特点
HVU数据集的显著特点在于其多模态和多层次的标注结构,能够支持从低级视觉特征到高级语义理解的全面分析。此外,该数据集规模庞大,包含了来自YouTube的海量视频资源,确保了数据的多样性和广泛性。通过CSV格式存储的视频ID及其标注信息,便于用户快速检索和处理。
使用方法
HVU数据集的使用方法简便,用户可通过提供的CSV文件直接访问视频ID及其相关标注信息,进行视频内容的分析与处理。此外,数据集提供了专门的下载工具,用户可根据需求下载特定视频资源。对于测试视频和缺失视频的访问,用户需填写指定表单以获取相应权限。
背景与挑战
背景概述
Holistic Video Understanding Dataset(HVU)是由Diba等人于2020年在欧洲计算机视觉会议(ECCV)上提出的一个大规模视频理解数据集。该数据集的核心研究问题在于全面理解视频内容,涵盖了从动作识别到场景理解等多个维度。HVU的创建旨在推动视频理解领域的研究进展,特别是在多标签分类、动作识别和场景分析等方面。通过提供丰富的视频数据和详细的标注,HVU为研究人员提供了一个强大的工具,以探索和解决视频理解中的复杂问题。
当前挑战
HVU数据集面临的挑战主要集中在两个方面。首先,视频理解领域的复杂性要求数据集能够涵盖多种类型的信息,如动作、场景、对象等,这对数据标注的准确性和全面性提出了高要求。其次,构建过程中,如何从海量的视频数据中筛选出具有代表性的样本,并确保这些样本能够覆盖多样化的场景和动作,是另一个重大挑战。此外,由于视频数据的动态性和多样性,确保数据集的规模和质量也是一项艰巨的任务。
常用场景
经典使用场景
Holistic Video Understanding Dataset(HVU)在视频理解领域中被广泛应用于多标签分类任务。该数据集通过整合视频的多维度信息,如动作、场景、物体、情感等,为研究者提供了一个全面理解视频内容的框架。其经典使用场景包括视频内容的多标签分类、视频事件检测以及视频情感分析等,这些任务在视频推荐系统、智能监控和虚拟现实等领域具有重要应用。
衍生相关工作
HVU数据集的发布激发了大量相关研究工作,特别是在视频理解的多标签分类、事件检测和情感分析等方面。许多研究者基于HVU数据集开展了深入的算法优化和模型改进,如提出新的深度学习模型以提高多标签分类的准确性,或开发新的时间定位算法以增强事件检测的精度。此外,HVU还促进了跨领域的研究合作,如与情感计算、自然语言处理等领域的结合,推动了视频理解技术的多元化发展。
数据集最近研究
最新研究方向
在视频理解领域,Holistic Video Understanding Dataset(HVU)因其大规模和多模态特性,成为近年来研究的热点。HVU不仅涵盖了视频的视觉信息,还整合了音频、文本等多模态数据,推动了跨模态视频理解的深入研究。当前,HVU的研究方向主要集中在多模态融合算法、视频内容的全局理解以及大规模数据集的预训练模型优化等方面。这些研究不仅提升了视频理解的准确性和鲁棒性,还为智能视频分析、自动驾驶和虚拟现实等前沿应用提供了坚实的基础。
以上内容由AI搜集并总结生成
用户留言
有没有相关的论文或文献参考?
这个数据集是基于什么背景创建的?
数据集的作者是谁?
能帮我联系到这个数据集的作者吗?
这个数据集如何下载?
点击留言
数据主题
具身智能
数据集  4099个
机构  8个
大模型
数据集  439个
机构  10个
无人机
数据集  37个
机构  6个
指令微调
数据集  36个
机构  6个
蛋白质结构
数据集  50个
机构  8个
空间智能
数据集  21个
机构  5个
5,000+
优质数据集
54 个
任务类型
进入经典数据集
热门数据集

中国区域地面气象要素驱动数据集 v2.0(1951-2024)

中国区域地面气象要素驱动数据集(China Meteorological Forcing Data,以下简称 CMFD)是为支撑中国区域陆面、水文、生态等领域研究而研发的一套高精度、高分辨率、长时间序列数据产品。本页面发布的 CMFD 2.0 包含了近地面气温、气压、比湿、全风速、向下短波辐射通量、向下长波辐射通量、降水率等气象要素,时间分辨率为 3 小时,水平空间分辨率为 0.1°,时间长度为 74 年(1951~2024 年),覆盖了 70°E~140°E,15°N~55°N 空间范围内的陆地区域。CMFD 2.0 融合了欧洲中期天气预报中心 ERA5 再分析数据与气象台站观测数据,并在辐射、降水数据产品中集成了采用人工智能技术制作的 ISCCP-ITP-CNN 和 TPHiPr 数据产品,其数据精度较 CMFD 的上一代产品有显著提升。 CMFD 历经十余年的发展,其间发布了多个重要版本。2019 年发布的 CMFD 1.6 是完全采用传统数据融合技术制作的最后一个 CMFD 版本,而本次发布的 CMFD 2.0 则是 CMFD 转向人工智能技术制作的首个版本。此版本与 1.6 版具有相同的时空分辨率和基础变量集,但在其它诸多方面存在大幅改进。除集成了采用人工智能技术制作的辐射和降水数据外,在制作 CMFD 2.0 的过程中,研发团队尽可能采用单一来源的再分析数据作为输入并引入气象台站迁址信息,显著缓解了 CMFD 1.6 中因多源数据拼接和气象台站迁址而产生的虚假气候突变。同时,CMFD 2.0 数据的时间长度从 CMFD 1.6 的 40 年大幅扩展到了 74 年,并将继续向后延伸。CMFD 2.0 的网格空间范围虽然与 CMFD 1.6 相同,但其有效数据扩展到了中国之外,能够更好地支持跨境区域研究。为方便用户使用,CMFD 2.0 还在基础变量集之外提供了若干衍生变量,包括近地面相对湿度、雨雪分离降水产品等。此外,CMFD 2.0 摒弃了 CMFD 1.6 中通过 scale_factor 和 add_offset 参数将实型数据化为整型数据的压缩技术,转而直接将实型数据压缩存储于 NetCDF4 格式文件中,从而消除了用户使用数据时进行解压换算的困扰。 本数据集原定版本号为 1.7,但鉴于本数据集从输入数据到研制技术都较上一代数据产品有了大幅的改变,故将其版本号重新定义为 2.0。CMFD 2.0 的数据内容与此前宣传的 CMFD 1.7 基本一致,仅对 1983 年 7 月以后的向下短/长波辐射通量数据进行了更新,以修正其长期趋势存在的问题。

国家青藏高原科学数据中心 收录

学生课堂行为数据集 (SCB-dataset3)

学生课堂行为数据集(SCB-dataset3)由成都东软学院创建,包含5686张图像和45578个标签,重点关注六种行为:举手、阅读、写作、使用手机、低头和趴桌。数据集覆盖从幼儿园到大学的不同场景,通过YOLOv5、YOLOv7和YOLOv8算法评估,平均精度达到80.3%。该数据集旨在为学生行为检测研究提供坚实基础,解决教育领域中学生行为数据集的缺乏问题。

arXiv 收录

UAVDT Dataset

The authors constructed a new UAVDT Dataset focused on complex scenarios with new level challenges. Selected from 10 hours raw videos, about 80, 000 representative frames are fully annotated with bounding boxes as well as up to 14 kinds of attributes (e.g., weather condition, flying altitude, camera view, vehicle category, and occlusion) for three fundamental computer vision tasks: object detection, single object tracking, and multiple object tracking.

datasetninja.com 收录

PU Dataset

德国帕德博恩大学(PU)轴承故障诊断数据集提供了丰富的轴承故障信号数据,包括内圈、外圈和滚动体故障等多种类型的轴承故障。与其他数据集相比,PU数据集的特色在于包含了大量的电机驱动系统故障数据,为轴承故障诊断研究提供了一个全面的实验平台。

github 收录

MIMII数据集

MIMII数据集是由日立有限公司研究与开发集团创建的,专注于工业机器异常声音检测的数据集。该数据集包含26,092个正常操作条件下的声音文件,涵盖阀门、泵、风扇和滑轨四种机器类型。数据集的创建过程中,使用了TAMAGO-03麦克风阵列进行声音采集,并在多个真实工厂环境中混合背景噪声以模拟实际环境。MIMII数据集主要用于机器学习和信号处理社区开发自动化设施维护系统,特别是在无监督学习场景下检测机器异常声音。

arXiv 收录