Learning to Erase Private Knowledge from Multi-Documents for Retrieval-Augmented Large Language Models
学习从多文档中擦除私有知识以用于检索增强型大语言模型
机构 * Beijing Advanced Innovation Center for Future Blockchain and Privacy Computing(未来区块链与隐私计算北京先进创新中心) ; School of Artificial Intelligence, Beihang University, China(北京航空航天大学人工智能学院) ; Institute of Computing Technology, Chinese Academy of Sciences(中国科学院计算技术研究所) ; School of Computer Science and Engineering, Beihang University(北京航空航天大学计算机科学与工程学院) ; Institute of Artificial Intelligence, Beihang University(北京航空航天大学人工智能研究所) ; Beijing Academy of Blockchain and Edge Computing(北京区块链与边缘计算研究院)
专题命中 检索器与排序 :RAG(abstract,abstract_cn);retrieval-augmented generation(abstract);分类 cs.CL
AI总结 提出Eraser4RAG,通过构建全局知识图谱、划分私有与公共子图并微调Flan-T5重写文档,结合PPO优化,有效擦除用户定义的私有知识,保留公共知识,防御去匿名化攻击。