PSA: Pyramid Sparse Attention for Efficient Video Understanding and Generation
PSA: 基于金字塔稀疏注意力的高效视频理解和生成
机构 * ZIP Lab, Zhejiang University(浙江大学浙大信息实验室)
AI总结 PSA通过多级池化键值表示实现高效视频理解和生成,相比现有稀疏注意力方法在效率和质量上表现更优。
Comments Tech report
高校专区
PSA: 基于金字塔稀疏注意力的高效视频理解和生成
机构 * ZIP Lab, Zhejiang University(浙江大学浙大信息实验室)
AI总结 PSA通过多级池化键值表示实现高效视频理解和生成,相比现有稀疏注意力方法在效率和质量上表现更优。
Comments Tech report
通过编程视觉思考:迈向图像思考的统一视角
机构 * Zhejiang University(浙江大学) ; ByteDance BandAI(字节跳动BandAI)
AI总结 CodeVision提出一种灵活的代码作为工具框架,通过两阶段训练提升模型对图像变化和多工具推理的鲁棒性,实验显示显著提升性能并促进新兴能力。
上下文感知的分层学习:一种更安全LLM的两阶段范式
机构 * Harbin Institute of Technology (Shenzhen)(哈尔滨工业大学(深圳)) ; Harbin Institute of Technology(哈尔滨工业大学) ; Great Bay University(大贝大学) ; Zhejiang University(浙江大学)
AI总结 本文提出上下文感知分层学习(CAHL)以提升LLM对工具完成攻击的鲁棒性,通过动态平衡语义理解和指令约束,有效增强模型安全性。
当有害内容被伪装时:通过CamHarmTI揭示LVLMs的感知失败
机构 * Zhejiang University(浙江大学)
AI总结 本文提出CamHarmTI基准,揭示LVLMs在识别伪装有害内容时的感知不足,并通过微调提升模型性能。
MagicView: 通过先验引导的上下文学习实现多视角一致的身份定制
机构 * Zhejiang University(浙江大学) ; Carnegie Mellon University(卡内基梅隆大学) ; Qualcomm Inc.(高通公司)
AI总结 MagicView 通过先验引导的上下文学习实现多视角一致的身份定制,有效提升多视角一致性与文本对齐能力。
MemOS:人工智能系统中的内存操作系统
机构 * MemTensor (Shanghai) Technology Co., Ltd.(MemTensor(上海)科技有限公司) ; Institute for Advanced Algorithms Research, Shanghai(上海先进算法研究所) ; Research Institute of China Telecom(中国电信研究院) ; Tongji University(同济大学) ; Zhejiang University(浙江大学) ; University of Science and Technology of China(中国科学技术大学) ; Peking University(北京大学) ; Renmin University of China(中国人民大学) ; Beihang University(北航) ; Shanghai Jiao Tong University(上海交通大学)
AI总结 MemOS是一种面向人工智能系统的内存操作系统,通过统一管理不同类型的内存资源,提升长上下文推理和持续个性化的能力。
Comments 36 pages, 10 figures, 5 tables
MERIT: 多语言语义检索与交错多条件查询
机构 * Zhejiang University(浙江大学)
AI总结 MERIT提出首个多语言交错多条件语义检索数据集,通过Coral框架提升检索性能45.9%,并验证了其在多个基准上的泛化能力。
Comments NeurIPS 2025; Project Page, Code, and Dataset at: https://merit-2025.github.io/
推荐去学习的综述:基本原理、分类、评估和开放问题
机构 * School of Communication Engineering, Hangzhou Dianzi University(杭州电子科技大学通信工程学院) ; College of Computer Science and Technology, Zhejiang University(浙江大学计算机科学与技术学院) ; Hong Kong Polytechnic University, Academy for AI(香港理工大学人工智能学院)
AI总结 本文综述了推荐去学习的基本原理、分类、评估方法及开放问题,旨在推动更高效、可扩展的去学习技术发展。
Comments Accepted by TKDE