AlienKevin/SWE-ZERO-100K-Qwen3-1.7B-Base-ECHO-eval
收藏官方服务:
资源简介:
这是一个评估数据集,用于记录基于Qwen3-1.7B-Base模型、使用100K SWE-ZERO轨迹和全转录损失(类似ECHO风格)训练的检查点,在100个任务的SWE-bench Verified切片上的性能评估结果。数据集包含任务ID、解决状态、奖励值、尝试次数、轨迹等字段,用于分析模型在软件工程任务上的表现。
Evaluation dataset for a Qwen3-1.7B-Base model fine-tuned on 100K SWE-ZERO trajectories with full-transcript loss (analogous to ECHO-style unmasking), assessed on the SWE-bench Verified slice of 100 tasks, containing performance metrics and trajectories.
提供机构:
AlienKevin


