Effective Frontiers: A Unification of Neural Scaling Laws
有效前沿:神经缩放定律的统一
机构 * Department of Mathematics and Statistics, Xi'an Jiaotong University(西安交通大学数学与统计学系) ; Department of Artificial Intelligence, Gaoling School of Artificial Intelligence, Renmin University of China(中国人民大学人工智能学院) ; University of Chinese Academy of Sciences(中国科学院大学) ; Shenzhen Institutes of Advanced Technology, Chinese Academy of Sciences(中国科学院深圳先进技术研究院)
AI总结 本文提出有效前沿框架,统一神经缩放定律,揭示容量、覆盖和优化瓶颈的相互作用,证明Kaplan和Chinchilla定律是同一问题的不同解。