xVerify: Efficient Answer Verifier for Reasoning Model Evaluations
xVerify:用于推理模型评估的高效答案验证器
机构 * China Telecom Research Institute(中国电信研究院) ; MemTensor (Shanghai) Technology Co., Ltd.(MemTensor(上海)技术有限公司) ; College of Software, Nankai University(南开大学软件学院) ; Center for Data Science, Peking University(北京大学数据科学中心) ; Peking University(北京大学) ; Data Development Center of China Telecom(中国电信数据开发中心)
专题命中 测试时计算 :reasoning(title,abstract);verifier(title,abstract);分类 cs.CL
AI总结 xVerify是一种高效答案验证器,通过VAR数据集训练,能够准确评估推理模型的等价性判断和最终答案提取,实验表明其在多个任务中表现优异。
Comments 35 pages