OpenAI

Multi-Probe Zero Collision Hash (MPZCH): Mitigating Embedding Collisions and Enhancing Model Freshness in Large-Scale Recommenders

多探针零碰撞哈希（MPZCH）：在大规模推荐系统中缓解嵌入碰撞并提升模型新鲜度

Ziliang Zhao, Bi Xue, Emma Lin, Tianqi Lu, Mengjiao Zhou, Kaustubh Vartak, Shakhzod Ali-Zade, Tao Li, Bin Kuang, Rui Jian, Bin Wen, Dennis van der Staay, Yixin Bao, Eddy Li, Chao Deng, Henry Wei, Songbin Liu, Qifan Wang, Kai Ren

机构 * Meta Platforms, Inc.（Meta平台公司） ； OpenAI 纠错

AI总结 本文提出MPZCH，一种基于线性探测的新型索引机制，通过合理表大小有效消除嵌入碰撞，保持生产效率，利用辅助张量和CUDA内核实现可配置探测和主动驱逐策略，防止哈希方法中的陈旧嵌入继承，提升物品嵌入新鲜度和质量。

Comments 9 pages, 6 figures