GitHub 发布 AI 代码审查开放基准 ReviewBench
GitHub 发布代码审查离线基准 ReviewBench,基于 1.039 亿个 GitHub pull request 的分布特征,构建了覆盖 19 种语言、187 个开源仓库的 219 个 pull request 评测集。
GitHub 发布代码审查离线基准 ReviewBench,基于 1.039 亿个 GitHub pull request 的分布特征,构建了覆盖 19 种语言、187 个开源仓库的 219 个 pull request 评测集。
MIT Technology Review 对 300 名数据与 AI 高管的调查显示,企业平均仅 34% 的智能体 AI 项目能进入生产环境,遗留数据系统、安全隐私顾虑以及知识与上下文缺失是主要失败点。
Berkeley AI Research 提出 ABBEL 框架,将 LLM 的摘要内容隔离为自然语言"信念状态"并加以监督,以应对长程交互中上下文无法无限扩展的问题。在 CollabBench 协作编程任务上,基于重建的信念评分(rec-BG)将 ABBEL 与全上下文模型的性能差距缩小约 50%,训练步数从 100 降至 50,峰值 token 长度也低于全上下文设置。