跳到正文
热点事件观察中

ExLabel 用自进化 Agent 评估 SWE 数据集质量

1 篇报道1 个报道来源1 天前更新

先了解这件事

AI 综述

2026年10月29日,arXiv cs.AI / cs.LG 刊出论文提出 ExLabel:一个基于大语言模型的自进化助手,用于评估 SWE-bench 类数据集的任务清晰度与测试覆盖。该系统维护一个经验库,把跨实例知识沉淀为判断标准,并在评估新样本时复用这些标准。论文作者还基于清洗后的 SWE-bench 与 Multi-SWE-bench 标注,构建了覆盖 8 种语言的 SWE-TQ 基准。截至目前,报道仅涉及方法与基准的提出,未披露实验结果或后续应用进展。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月29日
  1. arXiv cs.AI / cs.LG 最新
    ExLabel 用自进化 Agent 评估 SWE-bench 类数据集的任务清晰度与测试覆盖

    论文提出 ExLabel,一个基于 LLM 的自进化助手,用于评估 SWE-bench 类数据集的任务清晰度与测试覆盖。它维护经验库,把跨实例知识沉淀为判断标准并复用来评估新样本,作者还基于清洗后的 SWE-bench 与 Multi-SWE-bench 标注构建了覆盖 8 种语言的 SWE-TQ 基准。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。