中国科学院信息工程研究所 发布 AICrypto 数据集, 应用在 密码学、人工智能评估 领域

中国科学院信息工程研究所 本次发布的数据集 AICrypto, AICrypto是一个全面评估大型语言模型（LLMs）密码学能力的基准数据集，由中国科学院信息工程研究所等机构的研究人员开发。该数据集包含135个选择题、150个捕获旗帜（CTF）挑战和18个证明问题，涵盖了从事实记忆到漏洞利用和形式推理的广泛技能。所有任务都经过密码学专家的仔细审查或构建，以确保正确性和严谨性。AICrypto旨在帮助研究人员更好地理解LLMs在密码学领域的潜力和局限性，为未来的研究提供参考。

查看AICrypto

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。