AlignMerge - Alignment-Preserving Large Language Model Merging via Fisher-Guided Geometric Constraints
AlignMerge - 通过Fisher引导的几何约束实现的保持对齐的大语言模型合并
机构 * AI Institute, University of South Carolina(AI研究院,南卡罗来纳大学) ; Indian Institute of Technology, Kharagpur(印度理工学院,Khargpur分校) ; Islamic University of Technology(伊斯兰科技大学) ; Stanford University, USA(斯坦福大学,美国) ; Amazon AI, USA(亚马逊AI,美国) ; HCL(HCL公司) ; Evalueserve(Evalueserve公司) ; Apple (USA)(苹果(美国)) ; Google (USA)(谷歌(美国)) ; Pragya Lab, BITS Pilani, Goa(Pragya实验室, BITS Pilani,Goa分校)
专题命中 其他安全 :alignment(title,abstract);safety(abstract);分类 cs.AI
AI总结 AlignMerge通过Fisher引导的几何约束实现大语言模型合并,提升对齐度量并保持性能。