The FinAI 发布 MULTIFINBEN 数据集, 应用在 金融、自然语言处理 领域

The FinAI 本次发布的数据集 MULTIFINBEN, MULTIFINBEN是一个面向全球金融领域的多语言、多模态、难度感知的评估基准，旨在评估大型语言模型（LLM）在文本、视觉和音频等不同模态以及单语、双语和多语等不同语言环境下的性能。该数据集包含34个不同的数据集，涵盖英语、中文、日语、西班牙语和希腊语五种语言，并提供了一个动态的、难度感知的选择机制，以保持评估基准的紧凑性和平衡性。MULTIFINBEN旨在推动金融研究和应用领域的透明、可重复和包容性进展。

查看MULTIFINBEN

Dataset card 内容： 

Files and versions 内容： 

关于 The FinAI , The FinAI是一个专注于金融科技的研究机构，致力于通过人工智能技术推动金融行业的创新与发展。该机构汇聚了众多金融和科技领域的专家，开展了一系列研究项目，旨在为金融机构提供智能化解决方案。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。