ABC-Bench: Benchmarking Agentic Backend Coding in Real-World Development
ABC-Bench: 评估现实世界开发中自主后端编码的基准测试
机构 * Fudan University(复旦大学) ; Shanghai Qiji Zhifeng Co., Ltd.(上海启济智风有限公司) ; Shanghai Innovation Institute(上海创新研究院)
专题命中 工作流自动化 :agentic(title,abstract);autonomous agent(abstract);workflow(abstract);分类 cs.AI、cs.CL、cs.SE
AI总结 ABC-Bench是一个评估自主后端编码在真实可执行工作流中性能的基准测试,通过224个实际任务揭示了当前模型在复杂后端工程任务中的不足。