five

Multimodal Augmented Generative Images Dialogues (MAGID)

收藏
arXiv2024-03-06 更新2024-08-06 收录
下载链接:
http://arxiv.org/abs/2403.03194v1
下载链接
链接失效反馈
官方服务:
资源简介:
MAGID是由滑铁卢大学计算机科学学院开发的一个创新框架,旨在通过生成多样化和高质量的图像来增强纯文本对话数据集。该数据集通过一个扩散模型生成与文本匹配的图像,并利用一个创新的反馈循环机制,确保图像描述与图像质量之间的一致性,从而生成高质量的多模态对话数据。MAGID的应用领域主要集中在多模态交互系统的开发,特别是在需要大量多模态(文本和图像)对话数据的大型语言模型(LLMs)中。

MAGID is an innovative framework developed by the School of Computer Science, University of Waterloo, designed to enhance purely textual dialogue datasets by generating diverse and high-quality images. This framework generates text-aligned images via diffusion models, and leverages an innovative feedback loop mechanism to ensure the consistency between image descriptions and image quality, thus producing high-quality multimodal dialogue data. The application scenarios of MAGID mainly focus on the development of multimodal interaction systems, especially for large language models (LLMs) that require large-scale multimodal (text and image) dialogue datasets.
提供机构:
滑铁卢大学计算机科学学院
创建时间:
2024-03-06
5,000+
优质数据集
54 个
任务类型
进入经典数据集
二维码
社区交流群

面向社区/商业的数据集话题

二维码
科研交流群

面向高校/科研机构的开源数据集话题

数据驱动未来

携手共赢发展

商业合作