一致性 hash 算法
consistent hashing 算法早在 1997 年就在论文 Consistent hashing and random trees 中被提出,目前在 cache 系统中应用越来越广泛;
1. 1 基本场景
比如你有 N 个 cache 服务器(后面简称 cache ),那么如何将一个对象 object 映射到 N 个 cache 上呢,你很可能会采用类似下面的通用方法计算 object 的 hash 值,然后均匀的映射到到 N 个 cache ; hash(object)%N
一切都运行正常,再考虑如下的两种情况;
1 一个 cache 服务器 m down 掉了(在实际应用中必须要考虑这种情况),这样所有映射到 cache m 的对象都会失效,怎么办,需要把 cache m 从 cache 中移除,这时候 cache 是 N-1 台,映射公式变成了 hash(object)%(N-1) ;
2 由于访问加重,需要添加 cache ,这时候 cache 是 N+1 台,映射公式变成了 hash(object)%(N+1) ;
1 和 2 意味着什么?这意味着突然之间几乎所有的 cache 都失效了。对于服务器而言,这是一场灾难,洪水般的访问都会直接冲向后台服务器; 再来考虑第三个问题,由于硬件能力越来越强,你可能想让后面添加的节点多做点活,显然上面的 hash 算法也做不到。
有什么方法可以改变这个状况呢,这就是 consistent hashing...
2. 2 hash 算法和单调性
Hash 算法的一个衡量指标是单调性( Monotonicity ),定义如下: 单调性是指如果已经有一些内容通过哈希分派到了相应的缓冲中,又有新的缓冲加入到系统中。哈希的结果应能够保证原有已分配的内容可以被映射到新的缓冲中去,而不会被映射到旧的缓冲集合中的其他缓冲区。
容易看到,上面的简单 hash 算法 hash(object)%N 难以满足单调性要求。
3. 3 consistent hashing 算法的原理
一致性哈希算法应用及优化(最简洁明了的教程)_IT/计算机_专业资料。一致性哈希算法应用及优化一致性哈希算法的应用及其优化一.简单哈希算法哈希(Hash)就是把任意...
一致性 hash 算法( consistent hashing )张亮 consistent hashing 算法早在 1997 年就在论文 Consistent hashing and random trees 中被提出,目前在 cache 系统中...
一致性哈希算法及 java 实现应用场景 在做服务器负载均衡时候可供选择的负载均衡的算法有很多, 包括: 轮循算法(Round Robin) 、 哈希算法 (HASH) 、 最少连接...
阐述了一致性哈希算法的原理,详细介绍了一致性哈希算法在分布式系统中的应用,并总结了一致性哈希算法的优点。随着互联网技术的迅猛发展,分布式系统逐渐成为重要的技术...
基于一致性哈希算法的云存储服务器容错性研究_互联网_IT/计算机_专业资料 暂无评价
一致性哈希算法目前在分布式存储中应用广泛。该文对一致...
小结 一致性哈希算法最大程度的避免了 key 在服务节点列表上的重新分布, 其他附带 的改进就是有的一致性哈希算法还增加了虚拟服务节点的方法, 也就是一个服务 ...
一致性哈希算法及其在分布式系统中的应用_信息与通信_工程科技_专业资料。摘要本文将会从实际应用场景出发,介绍一致性哈希算法(Consistent Hashing 本文将会从实际...
一致性哈希算法(Consistent Hashing)_计算机软件及应用_IT/计算机_专业资料。一致性哈希算法(Consistent Hashing)应用场景这里我先描述一个极其简单的业务场景:用 4 ...
+86-551-5690963 5690964 分布式存储系统中一致性哈希算法的研究杨 彧剑 ,林波(78098 部队 , 四川 成都 611237 ) 摘要 : 一致性哈希算法目前在分布式存储中应用...
热门文档