生成式人工智能对学习影响的实验证据
Experimental Evidence on the Learning Impact of Generative AI
浏览论文内容
中文总结 AI 辅助
研究生成式人工智能对学生学习的影响，通过随机实验，发现使用人工智能能提高即时测试成绩，一周后仍有效果，文章质量有延迟改善，增强型用户收益更大，还找到学习收益背后的两种机制。
中文摘要 AI 辅助
我们在一项随机实验中研究生成式人工智能如何影响学生学习。在有监考的线下课程中，本科生学习一个不熟悉的主题，并在可使用或不可使用现成生成式人工智能的情况下撰写一篇分析性文章，然后立即和一周后进行独立评估。我们通过知识测试（事实和概念理解）和开放式文章（高阶技能）来衡量学习情况。使用人工智能使即时测试成绩提高了0.27个标准差，且一周后仍保持。相比之下，有人工智能辅助时文章质量变化不大，但一周后学生独立写作时，风格和相关性有所改善。增强型用户（用人工智能解释概念而非生成文本）的延迟收益更大，而自动化用户的短期质量提升在移除人工智能后消失。我们发现学习收益背后有两种机制：学生将时间从起草文本转移到阅读和搜索信息，且他们报告学习乐趣增加。
英文摘要
We study whether access to off-the-shelf generative AI changes how much students learn in a timed assignment. In a proctored, in-person randomized experiment, undergraduates study an unfamiliar topic and write an essay with or without AI, then complete unaided assessments immediately and one week later. AI access raises test scores, and a smaller gain persists a week later. Gains remain for students who use AI as a tutor ("augmentation") and fade for students who have AI write for them ("automation"). We document two mechanisms: students shift time from writing toward reading and searching for information, and report greater learning enjoyment.
发表机构
- Middlebury College（明德学院）
- IZA（IZA研究所）
机构由 AI 辅助整理，请以论文原文为准。
