ServiceNow

GEO-Bench-2: From Performance to Capability, Rethinking Evaluation in Geospatial AI

GEO-Bench-2：从性能到能力，重新思考地理空间AI的评估

Naomi Simumba, Nils Lehmann, Paolo Fraccaro, Hamed Alemohammad, Geeth De Mel, Salman Khan, Manil Maskey, Nicolas Longepe, Xiao Xiang Zhu, Hannah Kerner, Juan Bernabe-Moreno, Alexandre Lacoste

机构 * IBM Research Europe（IBM欧洲研究院） ； Technical University Munich（慕尼黑技术大学） ； Clark University（克拉克大学） ； MBZUAI ； NASA Impact（NASA影响计划） ； ESA Φ \Phi -lab（欧洲航天局Φ实验室） ； Arizona State University（亚利桑那州立大学） ； ServiceNow AI Research（ServiceNow人工智能研究） 纠错

AI总结 GEO-Bench-2通过引入能力组和灵活的评估协议，重新评估地理空间AI模型，揭示任务需求和数据模态对模型选择的影响。