zvzv1919/gpt4o_prompterv2_nocatalog_200-300

--- license: mit --- # gpt4o_prompterv2_nocatalog_200-300 ## Summary | Metric | Value | | --- | --- | | Total instances | 100 | | File matches | 44 (44%) | | Function matches | 24 (24%) | | File mismatches | 56 | | No result | 0 | | Avg turns | 9.4 | ## Config ```yaml agent_func: locate agent_module: agents.locator.plain bench_name: gpt4o_prompterv2_nocatalog_200-300 collection: zvzv1919/swe-lite-sympy-11400-69d146b3787b38cf81b3a888 commit_message: continued baseline dataset: zvzv1919/prompter_v2 limit: 100 max_turns: 20 max_workers: 7 model: gpt-4o offset: 200 repo_path: sympy-dev/sympy repo_path_prefix: /Users/xuan.zhao/Documents/GitHub-zv/ shuffle: false split: train top_k: 1 ```--- 许可证：MIT许可证 --- # gpt4o_prompterv2_nocatalog_200-300 ## 摘要 | 指标 | 数值 | | --- | --- | | 总实例数（Total instances） | 100 | | 文件匹配数（File matches） | 44（占比44%） | | 函数匹配数（Function matches） | 24（占比24%） | | 文件不匹配数（File mismatches） | 56 | | 无结果数（No result） | 0 | | 平均交互轮次（Avg turns） | 9.4 | ## 配置 yaml agent_func: locate agent_module: agents.locator.plain bench_name: gpt4o_prompterv2_nocatalog_200-300 collection: zvzv1919/swe-lite-sympy-11400-69d146b3787b38cf81b3a888 commit_message: 延续基准基线 dataset: zvzv1919/prompter_v2 limit: 100 max_turns: 20 max_workers: 7 model: gpt-4o offset: 200 repo_path: sympy-dev/sympy repo_path_prefix: /Users/xuan.zhao/Documents/GitHub-zv/ shuffle: false split: train top_k: 1