Meta 发布 MetaSyn 数据集, 应用在 嵌入表处理、大规模数据处理 领域

Meta 本次发布的数据集 MetaSyn, 该数据集名为MetaSyn，它是一个开源的大型合成数据集，其索引访问模式与Meta生产嵌入表类似。该数据集包含数百个嵌入表，这些表的哈希大小和池化因子都非常大且多样。为了确保在拥有10GB内存的GPU上可复现结果，表的大小维度选定为16或32。这是一个大规模的数据集，其任务是对嵌入表进行分片。

查看MetaSyn

README 内容： 

关于 Meta , Meta（前身为Facebook）是一家全球领先的社交媒体和科技公司，总部位于美国加利福尼亚州。Meta致力于通过其平台（如Facebook、Instagram和WhatsApp）连接全球用户，并推动虚拟现实、增强现实和人工智能等前沿技术的发展。

关于 arXiv , arXiv 是一个免费分发服务和开放获取的学术文章档案库，涵盖了物理学、数学、计算机科学、定量生物学、定量金融、统计学、电气工程和系统科学以及经济学等领域。该网站上的材料并未经过 arXiv 的同行评审。