How Long Is a Piece of String? A Brief Empirical Analysis of Tokenizers
字符串有多长?对分词器的简要实证分析
机构 * University of Cambridge(剑桥大学) ; The University of Hong Kong(香港大学)
AI总结 本文通过实证分析揭示了不同分词器和文本分布下token长度的显著差异,挑战了传统对token长度的简化假设。
高校专区
字符串有多长?对分词器的简要实证分析
机构 * University of Cambridge(剑桥大学) ; The University of Hong Kong(香港大学)
AI总结 本文通过实证分析揭示了不同分词器和文本分布下token长度的显著差异,挑战了传统对token长度的简化假设。
FEAT: 基于自适应传输的自由能估计器
机构 * University of Cambridge(剑桥大学) ; Cornell University(康奈尔大学) ; Xaira Therapeutics ; ML Lab, Capital Fund Management(ML实验室,资本基金管理公司) ; Courant Institute of Mathematical Sciences, NYU(纽约大学数学科学学院)
AI总结 FEAT提出了一种基于自适应传输的自由能估计框架,通过结合平衡与非平衡方法,提供一致且方差最小的估计器,并在多个科学领域中验证了其有效性。
Comments Accepted to NeurIPS 2025; the first two authors contribute equally to this work
图神经网络中的叠加
机构 * University of Cambridge(剑桥大学)
AI总结 本文研究了图神经网络中特征方向的共享,通过实验揭示了宽度、池化和激活函数对模型几何结构的影响,提出了更可解释的GNN设计方法。
线性规划层次在自旋系统吉布斯态下的收敛性
机构 * DAMTP, University of Cambridge, United Kingdom(剑桥大学 DAMTP 实验室,英国) ; Univ Lyon, Inria, ENS Lyon, UCBL, LIP, France(里昂大学,法国国家信息与自动化技术研究院,里昂高等师范学校, UCBL,LIP,法国)
AI总结 本文研究了两种线性规划层次在自旋系统吉布斯态下的收敛性,证明了在空间混合和马尔可夫链快速混合条件下,能够高效近似局部期望值并提供严格上下界。
Comments 11 pages
Journal ref Transactions on Machine Learning Research (11/2025)