KAUST 本次发布的数据集 PlanQA, PlanQA是一个诊断性基准,用于评估大型语言模型(LLMs)在室内场景中进行几何和空间推理的能力。数据集包含1800个结构化的2D室内布局,包括厨房、客厅和卧室,每个布局都配有一个自然语言问题,要求模型计算距离、评估放置可行性、评估可见性以及推理空间约束。数据集涵盖了各种问题类型,包括度量推理、拓扑推理以及室内设计约束,例如可达性、间隙、平衡和可用性。通过这个数据集,研究人员可以评估LLMs在模拟物理约束、保持空间连贯性或对布局扰动进行泛化方面的能力。
关于 KAUST , 阿卜杜拉国王科技大学(KAUST)是位于沙特阿拉伯的一所国际研究型大学,专注于科学、工程、计算机科学和商业管理等领域的研究与教育,致力于通过创新研究和技术转移推动全球和区域的发展。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)