arXiv Artificial Intelligence· Lining Hu, Ting Liu, Yuzhuo Fu·· 18 小时前AI 评分24
微服务 RCA 基准的汇总排行榜遗漏了什么：审计方法比较的范围与来源
What a Pooled Leaderboard Does Not Say: Auditing the Scope and Provenance of Method Comparisons in Microservice RCA Benchmarks
AI 导读
研究审计了 OpenRCA、RCAEval 和 PetShop 三个微服务 RCA 基准，在 11 个子系统上运行 16 种方法的已发布实现。15 个领先幅度超过子系统间差异的比较中 14 个处处成立，8 个低于该差异的比较中 6 个发生反转；第二次发布中三分之一比较变号，部分子系统上简单探针或自带基线即可击败所有已发表方法。23 篇 RCA 论文均未发布可核查前提的逐案例输出。
来源：arXiv Artificial Intelligence · arxiv.org