Demystifying deep search: a holistic evaluation with hint-free multi-hop questions and factorised metrics
解析深度搜索:基于无提示多跳问题和因子化指标的全面评估
机构 * Singapore University of Technology and Design(新加坡科技设计大学) ; Nanyang Technological University(南洋理工大学) ; Tongyi Lab, Alibaba Group(阿里云实验室)
专题命中 RAG评测 :retrieval-augmented generation(abstract);RAG(abstract);分类 cs.CL
AI总结 本文提出WebDetective基准测试,通过无提示多跳问题和因子化指标,揭示深度搜索中模型在知识利用和拒绝行为上的系统性弱点,并开发EvidenceLoop工作流程以改进自主推理能力。