What's in a Benchmark? The Case of SWE-Bench in Automated Program Repair
基准中有什么?SWE-Bench在自动程序修复中的案例
专题命中 代码评测 :program repair(title,abstract);分类 cs.SE
AI总结 本文研究了SWE-Bench排行榜上的提交来源、LLM使用情况及行业参与度,揭示了专有LLM在自动程序修复中的主导地位。
Comments Accepted in 2026 IEEE/ACM 48th International Conference on Software Engineering (ICSE-SEIP'26). https://doi.org/10.1145/3786583.3786904