Efficient Chain-of-Modality Reasoning via Progressive Compression for Spoken Language Models
通过渐进压缩实现口语语言模型的高效模态链推理
机构 * Shanghai Jiao Tong University(上海交通大学) ; Shanghai Innovation Institute(上海创新研究院) ; Token Foundry, Alibaba Group(阿里巴巴集团淘系技术)
AI总结 针对口语语言模型推理能力落后问题,提出高效模态链推理(ECoM推理),通过压缩文本组件提高推理准确性,并用渐进压缩策略训练,实验显示其在口语数学问答基准测试中,增强推理且保持效率,准确率提升显著。