Revealing and Enhancing Core Visual Regions: Harnessing Internal Attention Dynamics for Hallucination Mitigation in LVLMs
揭示并增强核心视觉区域:利用内部注意力动态缓解LVLMs中的幻觉
机构 * School of Electronic Engineering, Xidian University(西安电子科技大学电子工程学院) ; School of Computer Science and Technology, Xidian University(西安电子科技大学计算机科学与技术学院) ; College of Computer and Information, Hohai University(河海大学计算机与信息学院) ; Institute for Infocomm Research, A*STAR(A*STAR信息与通信研究所)
专题命中 跨模态检索 :multimodal(abstract);分类 cs.CV
AI总结 PADE通过构建PAD图和系统令牌补偿,利用内部注意力动态提升LVLMs的视觉定位能力并减少幻觉。