跳到正文
原文
arXiv 人工智能· Zheng Ren, Yanning Wang, Ziheng Huang, Fei Huang, Shiqi Wang, Ziqian Ye, Yang Yue·· 8 小时前AI 评分43

GeoSpatialBench:用于地理空间推理与受限空间编辑的评测基准

Mind the Spatial Gap: A Benchmark for Geospatial Reasoning and Constrained Spatial Editing

AI 导读

研究人员推出评测基准 GeoSpatialBench,涵盖 6 座城市真实数据与 28 类空间关系,用于评估多模态大语言模型(MLLMs)在 GeoJSON 和地图图像下的空间理解、几何推理及受限空间编辑能力。前沿模型评测显示,结构化 GeoJSON 表现始终优于地图图像,且多模态结合未带来可靠提升;模型在定量度量关系与编辑任务上性能明显下滑,多数失败编辑均违反了设定的空间约束。

来源:arXiv 人工智能 · arxiv.org