跳到正文
热点事件持续更新

GitHub与微软推出AI代码审查基准ReviewBench

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

GitHub与微软发布了针对AI代码审查智能体的开源基准测试ReviewBench,开发者现可提交自己的智能体参与排行榜评测。 该基准包含从海量GitHub拉取请求(PR)中筛选出的219个样本,采用多源黄金数据集和统一评分标准,支持按严重程度和类别进行细分评估。GitHub称,内部实践表明该基准的离线评估结果与线上A/B测试表现高度一致。 开发者提交的评测分数在维护者审查批准前将保持私密;只有当分数超过该智能体当前在排行榜上的成绩,或是首次提交时,才会被公开发布到排行榜上。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月5日
  1. GitHub Blog · AI & ML精选
    GitHub 发布 AI 代码审查开源基准测试 ReviewBench

    GitHub 发布了针对 AI 代码审查智能体的开源基准测试 ReviewBench,旨在提供严谨且可复现的离线评估方法。该基准包含从海量 GitHub PR 中筛选出的 219 个样本,采用多源黄金数据集和统一评分标准,支持按严重程度和类别进行细分评估。内部实践表明,该基准的离线评估结果与线上 A/B 测试表现高度一致,开发者现可提交自己的智能体参与排行榜评测。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。