纽约州立大学石溪分校 本次发布的数据集 Short-Clips, Full-Videos, 本数据集由纽约州立大学石溪分校计算机科学系与Atmanity Inc.合作构建,旨在帮助对话式AI理解何时以及如何回应。数据集包含真实对话视频中的视觉、听觉和文本流,共分为Short-Clips和Full-Videos两个子集。Short-Clips子集包含4,393个反应片段、2,000个完整回应片段和2,000个沉默片段,用于训练和测试模型对孤立短片段中适当声音反应的预测能力。Full-Videos子集则用于评估模型在连续对话中判断何时说话的能力。这些数据集的创建有助于提升对话式AI的实时响应能力和自然度。
README 内容:
关于 纽约州立大学石溪分校 , 纽约州立大学石溪分校(Stony Brook University)是一所公立研究型大学,位于美国纽约州石溪市,是纽约州立大学系统中的一员。该校成立于1957年,以其在自然科学、工程、医学和人文社会科学等领域的卓越教育和研究成果而闻名。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)