遇见数据集

MME-RealWorld基准测试

收藏
官方服务:

资源简介:

⾃动驾驶 、遥感 、视频监控 、报纸 、街景和⾦融图表等领域的图像。这些场景即使对⼈类来说也极具挑战性对从超过30万个公共和互联⽹来源中收集了总计13,366 张⾼分辨率图像,这些图像的平均分辨率为2,000×1,500,包含丰富的图像细节。邀请了25位专业标注员和 7 位 MLLMs 领域的专家参与数据标注和质量检查最终包含 29,429 个注释,涵盖 43 个⼦类任务,每个任务⾄少有100个问题 。在这⼀基准测试中对28个先进的 MLLMs 进⾏了评估,并提供了详细的分析,面向真实世界高分辨率推理多模态大模型评测基准集

二维码
社区交流群
二维码
科研交流群
商业服务