跳到正文
GitHub Blog · AI & ML· Michelle Zhou·精选AI 评分64

GitHub 发布 ReviewBench 开源代码审查评测基准

ReviewBench: An open benchmark for AI code review

AI 导读

GitHub 发布 ReviewBench,基于 1.039 亿条真实 PR 构建的 219 条开源 PR 评测集,覆盖 19 种语言。基准采用人工评审、前沿 LLM 和静态分析多源合并生成黄金标签,并与资深工程师独立复核达成 96.6% 一致性;提供 grounded 与 augmented 两套精确率/召回率指标及可调节的 Fβ 评分。

推荐理由

官方公开了数据集、评分规则和自建跑分工具,读者可据此比较不同代码审查 Agent 的实际表现。

来源:GitHub Blog · AI & ML · github.blog