Provably Learning Attention with Queries
通过查询证明学习注意力
机构 * University of Oxford(牛津大学) ; Saarland University(萨尔兰大学)
AI总结 本文通过查询证明学习单头注意力模型的可行性,并探讨了多头注意力的不可识别性问题。
Comments Preprint
高校专区
通过查询证明学习注意力
机构 * University of Oxford(牛津大学) ; Saarland University(萨尔兰大学)
AI总结 本文通过查询证明学习单头注意力模型的可行性,并探讨了多头注意力的不可识别性问题。
Comments Preprint
几乎免费的LLM劫持检测
机构 * School of Information Management, Wuhan University(武汉大学信息管理学院) ; Nanyang Technological University(南洋理工大学) ; Torr Vision Group, University of Oxford(牛津大学Torr视觉组)
AI总结 本文提出了一种几乎免费的LLM劫持检测方法,通过调整输入指令和logits温度来提高检测性能,无需额外计算成本。
Comments EMNLP 2025 (Findings) https://aclanthology.org/2025.findings-emnlp.309/
通过在线聚类蒸馏实现心电图视频的自监督学习
机构 * Department of Engineering Science, University of Oxford(工程科学系,牛津大学) ; Nuffield Department of Women’s and Reproductive Health, University of Oxford(妇女与生殖健康系,牛津大学) ; Fundamental AI Lab, University of Technology Nuremberg(基础人工智能实验室,纽伦堡技术大学) ; University of Amsterdam(阿姆斯特丹大学)
AI总结 DISCOVR通过在线聚类蒸馏实现心脏超声视频的自监督学习,结合时序动态和细粒度空间语义,提升临床任务性能。
Comments Accepted in NeurIPS 2025