Fujitsu-FRE/MAPS
收藏Hugging Face2025-05-29 更新2025-10-18 收录
下载链接：
https://hf-mirror.com/datasets/Fujitsu-FRE/MAPS
下载链接
链接失效反馈官方服务：
资源简介：
这是一个用于评估代理AI系统在多语言条件下性能和安全的第一个多语言代理AI基准。基准包含了805个任务，其中405个来自性能导向的数据集（GAIA、SWE-bench、MATH），400个来自代理安全基准。每个任务都被翻译成10种目标语言，总共产生了8.8K个多语言任务。
This is the first Multilingual Agentic AI Benchmark for evaluating agentic AI systems across different languages and diverse tasks. The benchmark includes 805 tasks: 405 from performance-oriented datasets (GAIA, SWE-bench, MATH) and 400 from the Agent Security Benchmark. Each task is translated into 10 target languages, resulting in a total of 8.8K multilingual tasks.
提供机构：
Fujitsu-FRE
