[论文解读] An Efficient Vectorized Hash Table for Batch Computations

Alakuijala, Jyrki, Bill Cox+1 more|arXiv (Cornell University)|Dec 19, 2016

Cryptographic Implementations and Security参考文献 5被引用 4

一句话总结

本文提出HighwayHash，一种高性能密钥哈希函数，利用SIMD乘法与置换指令，使1 KiB输入时速度比SipHash快5.2倍。通过用32位乘法和字节置换替代SipHash的循环移位混合方式，实现高效的向量化并行处理，同时保持强扩散性与对已知密码分析技术的抗性。

ABSTRACT

HighwayHash is a new pseudo-random function based on SIMD multiply and permute instructions for thorough and fast hashing. It is 5.2 times as fast as SipHash for 1 KiB inputs. An open-source implementation is available under a permissive license. We discuss design choices and provide statistical analysis, speed measurements and preliminary cryptanalysis. Assuming it withstands further analysis, strengthened variants may also substantially accelerate file checksums and stream ciphers.

研究动机与目标

• 设计一种比SipHash更快的替代方案，同时保持强伪随机特性以实现安全哈希。
• 利用现代CPU的SIMD指令——特别是32×32位乘法与字节置换——提升混合效果与吞吐量。
• 解决现有安全哈希函数在批量处理和高吞吐量工作负载（如消息认证与随机数生成）中的性能瓶颈。
• 提供一种密码学上稳健、开源的哈希函数，可抵抗常见攻击（如旋转攻击与差分密码分析）。

提出的方法

• 使用AVX2指令中的32×32位乘法实现强混合，替代SipHash中较慢的循环移位-XOR-加法链。
• 采用一种新颖的“拉链合并”技术，通过置换与乘法操作组合多个中间哈希状态车道。
• 采用四条独立车道的树形哈希构造，通过递归哈希折叠结果，生成单一64位输出。
• 在最终阶段使用独特的“置换并更新”步骤，混合相邻车道，确保所有64位均实现雪崩效应。
• 依赖密钥相关的置换与向量化操作，防止通过SAT求解器恢复密钥。
• 引入填充与输入长度处理机制，确保在消息末尾有零字节时仍能产生不同输出。

实验结果

研究问题

• RQ1 能否利用SIMD乘法与置换指令设计出比SipHash更快且更安全的密钥哈希函数？
• RQ2 用乘法替代基于循环移位的混合方式，是否能在密码学上实现更强的性能与扩散性？
• RQ3 该哈希函数能否抵抗已知的密码分析技术（如旋转攻击与差分攻击）？
• RQ4 在真实工作负载中，HighwayHash的性能与SipHash及其他快速哈希（如Murmur3与CityHash）相比如何？
• RQ5 该算法是否足够安全，可用于消息认证与随机数生成，同时不牺牲速度？

主要发现

• 对于1 KiB输入，HighwayHash的吞吐量比SipHash高出5.2倍，实测性能约为0.20周期/字节。
• 该算法通过所有统计测试，包括smhasher与类似RDRAND的均匀性测试，表明输出分布质量高。
• 由于有效32位加法的平均数量高达128次，旋转攻击不可行，偏差可忽略不计（1 in 2^1024）。
• 由于乘法逻辑的复杂性，基于SAT求解器的密钥恢复攻击极不可能，安全性优于SipHash等ARX型函数。
• 该算法对类似CLHash与Fingerprint64等函数的已知弱点具有抵抗力，后者在零输入模式下分布测试失败。
• 提供基于宽松Apache 2.0许可证的开源实现，可直接用于生产系统。