淘宝 & 天猫集团，阿里巴巴 发布 ECKGBench 数据集, 应用在 电商知识图谱、自然语言处理 领域

淘宝 & 天猫集团，阿里巴巴 本次发布的数据集 ECKGBench, ECKGBench是一个专门为评估大型语言模型在电商领域知识上的能力而设计的基准数据集。该数据集基于大规模电商知识图谱构建，包含大量真实的三元组（实体-关系-实体），旨在通过自动生成的问题来评估LLM模型的准确性。数据集的问题生成和负样本采样均采用自动化流程，同时融合了电商领域的专业知识，确保了评估的质量和效率。ECKGBench可应用于评估LLM模型在电商领域的知识边界，推动基础模型的开发和评估。

查看ECKGBench

README 内容： 

关于 淘宝 & 天猫集团，阿里巴巴 , -

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。