北京航空航天大学 发布 LLMCBench 数据集, 应用在 大型语言模型、模型压缩 领域

北京航空航天大学 本次发布的数据集 LLMCBench, LLMCBench是由北京航空航天大学等机构创建的一个用于评估大型语言模型（LLM）压缩算法性能的综合基准数据集。该数据集包含了11个不同的数据集，涵盖了多种网络架构和部署平台，旨在全面评估LLM压缩技术的效果。数据集的创建过程结合了实际模型生产需求，设计了多个评估指标和赛道，以确保评估的公平性和全面性。LLMCBench主要应用于LLM压缩算法的研究和开发，旨在解决模型在实际部署中的计算和存储效率问题。

查看LLMCBench

README 内容： 

关于 北京航空航天大学 , 北京航空航天大学（Beihang University）是中国著名的航空航天高等学府，成立于1952年，位于北京市。该校以航空航天工程为特色，涵盖工、理、管、文、法、经、哲等多个学科领域，是中国首批进入国家“211工程”和“985工程”的高校之一。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。