加州大学圣克鲁兹分校 发布 NovelScreenSpot 数据集, 应用在 GUI自动化、动作定位 领域

加州大学圣克鲁兹分校 本次发布的数据集 NovelScreenSpot, NovelScreenSpot是由加州大学圣克鲁兹分校和Adobe研究院共同创建的数据集，旨在评估GUI-Bee收集的数据在新型GUI环境中的对齐效果。该数据集包含5个新型GUI环境，数据来源于人类收集的查询，要求丰富的环境特定知识。通过GUI-Bee自主探索生成的数据，模型在这些新型环境中表现显著提升。该数据集主要用于GUI自动化领域，解决模型在新型环境中的动作定位问题。

查看NovelScreenSpot

关于 加州大学圣克鲁兹分校 , 加州大学圣克鲁兹分校（University of California, Santa Cruz）是美国加州大学系统的一部分，成立于1965年，位于加利福尼亚州的圣克鲁兹市。该校以其创新的教育模式、跨学科的研究和美丽的校园环境而闻名，尤其在环境科学、天文学和社会科学领域有显著的研究成果。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。