发表机构
University of Maryland; New York University; Carnegie Mellon University; Nanyang Technological University（马里兰大学; 纽约大学; 卡内基梅隆大学; 南洋理工大学）
机构由 AI 辅助整理，请以论文原文为准。AI 中文总结
研究推出开源浏览器平台VibeJam，支持用户与Aider智能体协作开发网站，试点显示其获资深程序员认可且初级学生用其生成的网站质量更优，可推动编码智能体相关研究。
AI 中文摘要
借助AI编程正日益呈现智能体化趋势，用户通过提示大型语言模型（LLM）直接编辑代码并审查变更，该方式在Web开发任务中的应用愈发广泛。尽管应用规模不断扩大，多数自然语言处理（NLP）研究仍采用离线评估，缺乏对在线研究的支持，从而错失了程序员实际使用编码智能体的相关洞见。我们推出VibeJam，这是一款基于浏览器的用户研究平台，供用户与AI智能体协作开发网站。VibeJam支持智能体自定义，默认使用开源智能体Aider；为贴合下游实际使用场景，我们新增了差异审查、对话、规划模式以及实时网站预览功能。在一项包含55项游戏化网站创建任务的试点研究中，5名资深AI程序员评价该系统有趣、简单且类似商业工具，而13名初级学生使用VibeJam完成的网站质量优于同任务中其他智能体生成的网站。我们将VibeJam开源，以推动其扩展并支持开展关于编码智能体如何助力用户的研究。
英文摘要
Programming with AI is increasingly agentic, users prompt LLMs to directly edit their code and review the changes, with adoption growing especially for web development tasks. Despite this growth, most NLP work uses offline evaluation and lacks support for online studies, losing insights into how programmers truly use coding agents. We release VibeJam, a browser-based user study platform for users to collaborate with AI agents to develop websites. VibeJam enables agent customization and uses the open-source Aider agent by default, and to mirror downstream use, we add diff review, chat and plan modes, and live website previews. In a pilot study with 55 released, game-based website creation tasks, five experienced AI programmers rate our system as fun, simple, and resembling commercial tools, while 13 junior students use VibeJam to make websites of higher quality than agents in the same task. We open-source VibeJam to spur extensions and support studies on how coding agents can help users.
CommentsEMNLP 2026 (Demo)
