Brain-Inspired Exploration of Functional Networks and Key Neurons in Large Language Models
受脑启发的大型语言模型中功能网络和关键神经元探索
机构 * School of Automation, Northwestern Polytechnical University, Xi’an, China(自动化学院,西北工业大学,西安,中国) ; School of Computing, University of Georgia, Athens, USA(计算机学院,佐治亚大学,亚特兰大,美国) ; School of Physics and Information Technology, Shaanxi Normal University, Xi’an, China(物理与信息技术学院,陕西师范大学,西安,中国)
专题命中 其他LLM :large language model(title,abstract);language model(title,abstract);LLM(abstract);分类 cs.CL、cs.AI、cs.LG
AI总结 本文受脑启发,探索LLM中的功能网络和关键神经元,发现这些网络对模型性能至关重要,通过抑制或增强网络活动可影响模型整体表现或特定任务效果。
Comments 21 pages, 18 figures