NASK – National Research Institute 发布 PL-Guard 数据集, 应用在 自然语言处理、安全评估 领域

NASK – National Research Institute 本次发布的数据集 PL-Guard, PL-Guard是一个为波兰语语言模型安全分类而创建的手动标注基准数据集，旨在解决当前安全评估主要集中在高资源语言上的问题。该数据集包含了超过7,000个实例，主要由语言模型的回答组成，并经过专家评审进行安全标签标注。为了评估模型在不同语言环境下的鲁棒性，还创建了PL-Guard-adv，这是PL-Guard的对抗性扩展，具有文本扰动功能。PL-Guard-train包含6,487个实例，用于训练，而PL-Guard-test包含900个平衡测试实例。PL-Guard-adv-test是PL-Guard-test的扰动版本，用于评估模型在噪声输入下的鲁棒性。

查看PL-Guard

Dataset card 内容： 

Files and versions 内容： 

关于 NASK – National Research Institute , -

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。