Attention Calibration for Position-Fair Dense Information Retrieval
面向位置公平的密集信息检索的注意力校准
机构 * Department of Computational Linguistics University of Zurich(计算语言学系苏黎世大学)
专题命中 检索器与排序 :dense retrieval(abstract);分类 cs.IR、cs.CL、cs.AI
AI总结 针对密集检索模型的位置偏差问题,提出在推理时通过注意力校准(引入强度系数λ插值原始与完全校准分布)来提升位置公平性,无需重新训练且不牺牲整体检索效果,在多个数据集和模型上验证了部分校准优于完全校准,并提供了默认配置。