Orientation Reading by Production Vision-Language Models on Optotype Charts: A Controlled Multi-Model Evaluation Across Reasoning Modes, Prompts, and Access Modalities
通过生产视觉语言模型在视标图表上进行方向读取:跨推理模式、提示和访问方式的受控多模型评估
专题命中 推理与问题求解 :language model(title,abstract)
AI总结 研究通过消费者聊天界面评估四个视觉语言模型在视标图表上读取方向的能力,在多种推理模式、提示变体下运行,发现各模型准确率有差异,错误有特定方向,单一准确率掩盖问题,强调应多轴评估视觉语言模型。
Comments 4 figures, 4 supplementary figures