本次发布的数据集COMPASS-Policy-Alignment-Testbed-Dataset,COMPASS政策对齐测试平台数据集用于评估大型语言模型(LLMs)在企业特定政策遵循方面的表现。数据集包含8个虚拟企业场景(行业垂直领域),如汽车、政府、金融、医疗、旅游、电信、教育和人力资源招聘等。每个场景下有不同的查询类型,包括允许的基础查询、允许的边缘查询、拒绝的基础查询和拒绝的边缘查询,用于测试政策边界。数据集结构按行业垂直领域组织,每个子集包含一个测试分割,存储为Parquet格式。数据字段包括id、query_type、query、category、policy、attack_variation和company等。数据集的用途包括政策合规性基准测试、安全评估和类型分析。
查看COMPASS-Policy-Alignment-Testbed-Dataset
Dataset card内容:
Files and versions内容:
关于,国庆学校是一所位于中国的教育机构,专注于提供基础教育服务。学校致力于培养学生的综合素质,注重学术与品德的全面发展。
关于HuggingFace,Hugging Face是一个机器学习社区协作平台,专注于模型、数据集和应用程序的创建、发现和协作。该平台支持多种数据类型,包括文本、图像、视频、音频和3D数据,并提供开源工具和付费计算及企业解决方案。





_1769672084863.jpg)