QUACK: Questioning, Understanding, and Auditing Communicated Knowledge in Multimodal Social Deduction Agents
QUACK: 多模态社交推理智能体中的沟通知识质疑、理解与审计
机构 * McGill University(麦吉尔大学) ; Mila - Quebec AI Institute(魁北克人工智能研究所) ; University of Cambridge(剑桥大学) ; MBZUAI - Mohamed bin Zayed University of Artificial Intelligence(MBZUAI - 摩苏尔·本·扎耶德人工智能大学) ; University of Toronto(多伦多大学) ; Salesforce
专题命中 逻辑推理 :reasoning(abstract);分类 cs.CL、cs.AI
AI总结 提出QUACK框架,通过游戏结果、行为轨迹和话语一致性三级评估,自动审计多模态社交推理智能体语言与感知行为的一致性,发现最强智能体仍有15.1%的空间幻觉和过半无据指控。