Where Induction Runs Out: Description-Length Difficulty and the Memorisation Gap in Integer-Sequence Benchmarks
归纳的尽头:整数序列基准中的描述长度难度与记忆差距
专题命中 数学推理 :reasoning(abstract);分类 cs.LG
AI总结 该研究以OEIS整数序列基准为对象,通过MDL参考学习器发现整数序列存在记忆差距,揭示语言模型在该基准中更多依赖记忆而非归纳,并提出MDL可作为无干扰难度信号。
Comments 14 pages, 6 figures. Code and data: https://github.com/sabilashang/where-induction-runs-out. Archived: doi:10.5281/zenodo.21830331