大语言模型能否从选择数据中学习偏好?
Can an LLM Learn Preferences from Choice Data?
AI总结:
本文探讨大语言模型能否通过观察选择数据学习决策者的偏好并生成一致的推荐。提出了一种可移植的模拟-推荐-评估框架,通过比较LLM推荐与已知偏好原始数据推导出的最优选择进行测试。研究发现,随着模型观察更多选择,推荐准确性提高,但不同偏好类型和LLM的学习效果存在异质性。
摘要:
大语言模型(LLMs)能否从观察到的选择中学习决策者的偏好,并在新情境中生成一致的推荐?我们提出了一种可移植的Simulate-Recommend-Evaluate框架,通过将LLM的推荐与已知偏好原始数据推导出的最优选择进行比较,测试从揭示性选择数据中学习偏好的能力。我们应用该框架研究在不确定性下的选择行为,使用失望厌恶模型。推荐准确性随着模型观察更多选择而提高,但学习效果在不同偏好类型和LLM之间存在异质性:GPT在学习风险厌恶方面优于失望厌恶,Gemini在高失望厌恶区域表现最佳,而Claude在参数区域中表现出最广泛的有效学习。
英文摘要:
Can large language models (LLMs) learn a decision maker's preferences from observed choices and generate preference-consistent recommendations in new situations? We propose a portable Simulate-Recommend-Evaluate framework that tests preference learning from revealed-choice data by comparing LLM recommendations with optimal choices implied by known preference primitives. We apply the framework to choice under uncertainty using the disappointment aversion model. Recommendation accuracy improves as models observe more choices, but learning is heterogeneous across preference types and LLMs: GPT learns risk aversion better than disappointment aversion, Gemini performs best in high disappointment-aversion regions, and Claude shows the broadest effective learning across parameter regions.
机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。