Intermittent Semi-Working Mask: A New Masking Paradigm for LLMs
间歇半工作掩码:一种新的LLM掩码范式
机构 * Zhejiang University(浙江大学) ; Ant Group(蚂蚁集团)
AI总结 间歇半工作掩码通过引入稀疏双向注意力,实现高效多轮对话和上下文密集型任务处理,同时保持推理效率。
高校专区
间歇半工作掩码:一种新的LLM掩码范式
机构 * Zhejiang University(浙江大学) ; Ant Group(蚂蚁集团)
AI总结 间歇半工作掩码通过引入稀疏双向注意力,实现高效多轮对话和上下文密集型任务处理,同时保持推理效率。
ExpertWeaver: 通过GLU激活模式解锁密集大语言模型中的内在MoE
机构 * Zhejiang University(浙江大学) ; Shanghai AI Laboratory(上海人工智能实验室) ; Shanghai Innovation Institute(上海创新研究院) ; Fudan University(复旦大学) ; Chinese University of Hong Kong(中国香港大学)
AI总结 ExpertWeaver通过GLU激活模式解锁密集大语言模型中的内在MoE,提供无需训练的高效转换方法。
一个引导所有代理:通过显式世界表示增强多模态大语言模型用于视觉-语言导航
机构 * Australian Institute for Machine Learning, Adelaide University(澳大利亚机器学习研究所,阿德莱德大学) ; The University of Manchester(曼彻斯特大学) ; Zhejiang University(浙江大学) ; Agency for Science, Technology and Research (A*STAR)(科技研究局(A*STAR))
AI总结 通过显式世界表示增强多模态大语言模型,实现视觉-语言导航的解耦框架,提升导航性能与现实应用能力。
具有动作修正的世界模型增强型网络代理
机构 * Zhejiang University(浙江大学) ; Tencent AI Lab(腾讯AI实验室)
AI总结 WAC通过多代理协作和风险感知机制,提升网络代理在复杂任务中的鲁棒性和执行效率。
在大语言模型时代如何研究人机交互?一项系统综述
机构 * The Hong Kong University of Science and Technology (Guangzhou)(香港科技大学(广州)) ; Zhejiang University(浙江大学) ; Savannah College of Art and Design(萨凡纳艺术设计学院) ; West China Hospital, Sichuan University(四川大学华西医院)
AI总结 本文系统综述了大语言模型时代人机交互的研究现状,揭示了LLMs对HRI基本原理的影响及当前研究的探索性特征,提出了未来研究的设计考虑与挑战。
查询作为锚点:通过大语言模型实现场景自适应的用户表示
机构 * Ant Group(蚂蚁集团) ; East China Normal University(东华大学) ; Zhejiang University(浙江大学)
AI总结 通过Query-as-Anchor框架,利用大语言模型实现动态查询感知的用户表示,提升工业级用户建模的场景适应性和性能表现。
Comments 15 pages, 12 figures
MARS-Sep: 多模态对齐强化声音分离
机构 * Zhejiang University(浙江大学) ; Institute of Automation, Chinese Academy of Sciences(中国科学院自动化研究所)
AI总结 MARS-Sep通过强化学习框架实现多模态对齐,提升声音分离的语义一致性和信号质量。
Comments ICLR 2026