GitHub 发布 AI 代码审查基准 ReviewBench

GitHub 发布 ReviewBench，一个面向 AI 代码审查的开放离线基准，基于 1.039 亿个 GitHub pull request 的分布构建，包含 19 种语言的 219 个公开 pull request。其研究预览版已通过 ReviewBench 网站开放，用户可查看完整基准、比较代码审查 agent，并提交自己的 agent 进行评估和迭代。 使用流程上，用户可先在 25 个 PR 的测试集上运行并查看逐 PR 细节，反复调整配置；准备好后再运行全部 219 个 pull request（三轮），由与其他参赛者相同的评审打分。提交的分数在维护者审核批准前保持私密，且只有在超过该 agent 当前排行榜成绩或为其首次上榜时才会公布到排行榜。

AI 根据报道生成 · 2 天前更新

还没有足够的连续观测数据，暂不绘制趋势。