Revisiting the Past: Data Unlearning with Model State History
重访过去:利用模型状态历史的数据遗忘
机构 * Department of Computer Science, University of Maryland(大学马里兰大学计算机科学系) ; Max Planck Institute for Software Systems(马克斯·普朗克软件系统研究所)
专题命中 预训练与数据 :large language model(abstract);language model(abstract);pretraining(abstract);分类 cs.LG
AI总结 本文提出MSA算法,通过利用预训练过程中的模型检查点来估计并抵消特定数据点的影响,实验证明其在多个基准、模型和评估指标上表现优异,为更灵活的数据擦除大型语言模型提供有效方法。
Comments Accepted to ICLR 2026