中国科学院信息工程研究所 发布 Rationale-Augmented Dataset 数据集, 应用在 多模态推理、自然语言处理 领域

中国科学院信息工程研究所 本次发布的数据集 Rationale-Augmented Dataset, Rationale-Augmented Dataset是一个包含指令和理由对的数据集，旨在帮助LVLMs模型在解释相关图像时生成更加准确的文本内容，减少幻觉现象。数据集的创建过程涉及使用LLM模型生成理由说明，并将这些理由嵌入到原始指令中。数据集的应用领域主要是多模态推理任务，如图像描述、视觉问答和多模态对话。通过使用Rationale-Augmented Dataset进行微调，模型在幻觉特定任务和更广泛的多模态推理任务上都有显著提升。

查看Rationale-Augmented Dataset

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。