卡内基梅隆大学 发布 ProMQA-Assembly 数据集, 应用在 程序性问答、装配任务 领域

卡内基梅隆大学 本次发布的数据集 ProMQA-Assembly, ProMQA-Assembly是一个多模态程序性问答数据集，专注于装配任务。该数据集由391个问答对组成，每个问答对都包含相应的视频片段和指令。数据集来源于Assembly101，这是一个包含用户组装玩具视频的数据集。数据集的创建过程采用了半自动化的问答标注方法，其中大型语言模型（LLM）生成候选答案，并由人工进行验证。此外，还为组装玩具任务创建了指令任务图。这些新创建的任务图用于基准测试实验，以及辅助人工在问答标注过程中的验证。数据集旨在促进程序性活动助理的进一步发展，特别是在装配领域。

查看ProMQA-Assembly

README 内容： 

关于 卡内基梅隆大学 , 卡内基梅隆大学是一所位于美国宾夕法尼亚州匹兹堡的私立研究型大学，以其在科学、工程、艺术和人文学科的卓越教育和研究而闻名。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。