新加坡科技研究局信息通信研究院 本次发布的数据集 IFEval-Audio, IFEval-Audio 是一个用于评估音频大型语言模型(LLMs)指令遵循能力的评估数据集。它包含 280 个音频-指令-答案三元组,涵盖了内容、大小写、符号、列表结构、长度和格式等六个维度。每个三元组将音频输入与文本指令配对,要求模型生成符合指定结构的输出。该数据集公开发布,以支持该新兴领域未来的研究。
关于 新加坡科技研究局信息通信研究院 , 新加坡科技研究局信息通信研究院是新加坡科技研究局旗下的一个研究机构,专注于信息通信技术的研究与开发。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)