香港大学 发布 AGUVIS COLLECTION 数据集, 应用在 GUI代理、自主导航 领域

香港大学 本次发布的数据集 AGUVIS COLLECTION, AGUVIS COLLECTION是一个大规模的GUI代理训练数据集，由现有的GUI代理数据收集和增强而成。该数据集包含两个部分：用于基础训练的grounding split和用于规划与推理训练的planning & reasoning split。数据集的构建过程包括使用模板增强的grounding数据和通过视觉语言模型（VLM）增强的规划与推理轨迹。这些数据旨在训练能够跨平台操作的自主GUI代理，解决复杂数字环境中的导航和交互问题。

查看AGUVIS COLLECTION

关于 香港大学 , 香港大学（HKU）是一所位于亚洲国际城市香港的公立研究型大学，以其卓越的教学和研究质量享誉全球。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。