Holistic Evaluation of Multimodal LLMs on Spatial Intelligence
多模态大语言模型在空间智能方面的综合评估
专题命中 空间理解 :spatial understanding(abstract);分类 cs.CV、cs.RO
AI总结 本文提出EASI框架,用于评估多模态大语言模型在空间智能方面的综合表现,揭示GPT-5在SI中的优势与不足,并展示专有模型在困难任务上的劣势。
Comments Codebase: https://github.com/EvolvingLMMs-Lab/EASI/ ; Leaderboard: https://huggingface.co/spaces/lmms-lab-si/EASI-Leaderboard