Rubrics to Tokens: Bridging Response-level Rubrics and Token-level Rewards in Instruction Following Tasks
评分标准到标记:在指令遵循任务中连接响应级评分标准和标记级奖励
机构 * Shanghai Jiao Tong University(上海交通大学) ; Alibaba Group(阿里巴巴集团) ; Zhejiang University(浙江大学) ; Shanghai Innovation Institute(上海创新研究院) ; GAIR
AI总结 本文提出RTT框架,通过引入标记级相关性判别器和RTT-GRPO方法,解决响应级奖励稀疏性和模糊性问题,提升指令遵循任务的准确率。