EQUES Inc. 本次发布的数据集 JPHARMABENCH, JPHARMABENCH是一个为评估日本医药领域的语言模型而构建的基准数据集,包括三个子数据集:YakugakuQA、NayoseQA和SogoCheck。YakugakuQA基于日本国家药师资格考试,包含3,021个问题;NayoseQA用于评估药物名称和活性成分的标准化,包含34,769个问题;SogoCheck用于检测配对文本之间的逻辑或事实不一致,包含200个问题。这些数据集基于公开可用的数据构建,旨在反映医药公司实际操作中遇到的各种情况,如监管和文书工作。这些数据集为日本医药领域的语言模型评估提供了宝贵的资源。
关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库,涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。





_1769672084863.jpg)