Multimodal Opinionlevel Sentiment Intensity (MOSI)

Multimodal Opinionlevel Sentiment Intensity (MOSI) 包含：(1) 多模态观察，包括转录的语音和视觉手势以及自动音频和视觉特征，(2) 观点级主观性分割，(3) 具有高度编码一致性的情感强度注释，以及(4) 单词、视觉和听觉特征之间的对齐。Multimodal Opinion-level Sentiment Intensity (MOSI) includes: (1) multimodal observations, including transcribed speech, visual gestures, as well as automated audio and visual features; (2) opinion-level subjective segmentation; (3) sentiment intensity annotations with high coding consistency; and (4) alignments between word-level, visual and auditory features.

搜集汇总

背景与挑战

背景概述

MOSI是一个2016年发布的多模态情感分析数据集，由卡内基梅隆大学、华盛顿大学和南加州大学联合提供。该数据集包含转录语音、视觉手势、自动音频和视觉特征，并提供了观点级主观性分割和情感强度注释，同时实现了多特征之间的对齐。