SciReplicate-Bench: Benchmarking LLMs in Agent-driven Algorithmic Reproduction from Research Papers
机构 * King’s College London(伦敦国王学院) ; The Alan Turing Institute(艾伦·图灵研究所)
专题命中 仓库级理解 :repository(abstract);分类 cs.SE、cs.CL、cs.AI
AI 大模型
代码生成、软件工程智能体、程序修复、测试生成和开发者工具。
机构 * King’s College London(伦敦国王学院) ; The Alan Turing Institute(艾伦·图灵研究所)
专题命中 仓库级理解 :repository(abstract);分类 cs.SE、cs.CL、cs.AI
机构 * ETH Zürich(苏黎世联邦理工学院) ; University of Science and Technology of China(中国科学技术大学) ; Institute of Automation, Chinese Academy of Sciences(中国科学院自动化研究所) ; EPFL(苏黎世联邦理工学院)
专题命中 仓库级理解 :repository(abstract);分类 cs.AI、cs.LG
Comments Discussions, comments, and questions are welcome in \url{https://github.com/tim-learn/Awesome-LabelFree-VLMs}
专题命中 仓库级理解 :repository(abstract);分类 cs.SE
Comments 5 pages, to appear in the Proceedings of the 41st International Conference on Software Maintenance and Evolution (ICSME'25) - Tool Demonstration Track
专题命中 仓库级理解 :repository(abstract)