Black-Box Reliability Certification for AI Agents via Self-Consistency Sampling and Conformal Calibration
通过自一致性采样和置信校准实现AI代理的黑盒可靠性认证
机构 * OPIT -- Open Institute of Technology(开放技术研究所)
专题命中 工具调用 :AI agent(title);分类 cs.AI、cs.CL、cs.LG
AI总结 本文通过自一致性采样和置信校准方法,为AI系统提供可靠性评估,验证了其在不同任务和数据上的有效性,并展示了降低API成本的应用价值。
Comments 41 pages, 11 figures, 10 tables, including appendices