Modular TTT: Rethinking Test-Time Training as Composable Modules
模块化测试时训练(TTT):将测试时训练重新思考为可组合模块
机构 * Shanghai Jiao Tong University(上海交通大学) ; Shanghai Innovation Institute(上海创新研究院) ; ByteDance Seed(字节跳动Seed)
AI总结 该研究提出Modular TTT框架,将TTT各组件设为显式设计维度,通过消融实验明确关键组件对性能的影响,训练的大参数模型性能可与Gated DeltaNet媲美。
Comments Code: https://github.com/ByteDance-Seed/Modular-TTT