爱丁堡大学 本次发布的数据集 FRANKLIN, FRANKLIN数据集是一个新颖的问答数据集,由爱丁堡大学的研究团队创建。该数据集设计用于评估大型语言模型在元级和对象级推理方面的能力。它包含的问题需要模型进行高层次的策略规划和低层次的具体执行,如数学推理。FRANKLIN数据集的创建灵感来源于FRANK系统,一个采用元级和对象级推理的问答系统。
关于 爱丁堡大学 , 爱丁堡大学是一所位于英国苏格兰首府爱丁堡的世界著名公立综合研究型大学,拥有悠久的历史和卓越的学术声誉。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)