GitHub Blog · AI & ML· Michelle Zhou·· 2026-10-05精选AI 评分58
GitHub 发布 AI 代码审查开放基准 ReviewBench
ReviewBench: An open benchmark for AI code review
AI 导读
GitHub 发布 ReviewBench，一个面向 AI 代码审查智能体的开放离线基准，现已开放研究预览版。基准包含 19 种语言、187 个开源仓库的 219 个 PR，其语言与仓库规模分布对齐对 103.9M 个 GitHub PR 的分析结果，PR 规模则刻意向可审查的中长尾加权。
借鉴点
可借鉴其多源金标集构建法：人工评审、后续提交推断、静态分析、多个前沿 LLM 汇总去重，再用统一 rubric 判分；代价是 219 条 PR 的标注与专家复核成本高，且依赖 Claude Sonnet 5 作 judge。
来源：GitHub Blog · AI & ML · github.blog