five

InductionBench

收藏
arXiv2025-09-30 收录
下载链接:
https://github.com/Wenyueh/inductive_reasoning_benchmark
下载链接
链接失效反馈
官方服务:
资源简介:
该数据集是一个旨在评估大型语言模型(LLM)归纳推理能力的基准测试。它包含了在多个LLM和无-shot思维链提示上的评估,同时采用了精确度、召回率和兼容性等指标。为了实验设置,生成了10个函数,以通过生成函数和性能指标来评估LLM的归纳推理能力。

This dataset is a benchmark designed to evaluate the inductive reasoning capabilities of Large Language Models (LLMs). It includes evaluations across multiple LLMs and zero-shot Chain-of-Thought (CoT) prompting settings, adopting metrics such as precision, recall, and compatibility. For the experimental setup, 10 functions were generated to assess the inductive reasoning abilities of LLMs using these generated functions and the aforementioned performance metrics.
5,000+
优质数据集
54 个
任务类型
进入经典数据集
二维码
社区交流群

面向社区/商业的数据集话题

二维码
科研交流群

面向高校/科研机构的开源数据集话题

数据驱动未来

携手共赢发展

商业合作