Fairness or Fluency? An Investigation into Language Bias of Pairwise LLM-as-a-Judge
公平性还是流畅性?对配对LLM-as-a-judge语言偏见的调查
机构 * University of Southern California(南加州大学) ; Arizona State University(亚利桑那州立大学)
AI总结 本文研究了LLM-as-a-judge在配对任务中的语言偏见,发现不同语言在性能和偏好上有显著差异,且语言偏见不能仅由困惑度解释。