Beyond Dense States: Sparse Transcoders as Causally Testable Operators for LLM Latent Reasoning
超越密集状态:将稀疏转码器提升为活跃运算符以进行潜在推理
机构 * College of Computer Science and Technology, Nanjing University of Aeronautics and Astronautics(南京航空航天大学计算机科学与技术学院) ; MIIT Key Laboratory of Pattern Analysis and Machine Intelligence(信息产业部模式分析与机器智能重点实验室) ; Institute for AI, Tsinghua University, Beijing, China(清华大学人工智能研究院)
专题命中 数学推理 :reasoning(title,abstract);chain-of-thought(abstract);CoT(abstract_cn);分类 cs.AI、cs.LG
AI总结 LSTR通过将稀疏转码器提升为活跃运算符,实现更可控和可解释的潜在推理。