University of California, Berkeley（加州大学伯克利分校）

Rating the Raters: Rasch Measurement Theory for LLM Evaluation

评估评估者：用于大语言模型评估的拉施测量理论

Pratik S. Sachdeva, Nathan Boudol

机构 * D-Lab, University of California, Berkeley（加州大学伯克利分校D-Lab） ； Grenoble INP（格勒诺布尔国立综合理工学院） 纠错

AI总结 该研究将拉施测量理论应用于LLM评估，通过多维度拉施模型分析发现LLM与人类评估者存在系统性差异，提出RMT适用于各类LLM评估范式。