男人的天堂免费A级毛片无码,在线 | 18精品免费1区2,国产精品亚洲一区二区在线观看,亚洲H在线播放在线观看H

 
您現在的位置:首頁 ? 知識庫 ? 軟件開發(fā) 軟件開發(fā)
百度資深架構師帶你深入淺出一致性Hash原理
發(fā)布日期:2018-04-11

一、前言

在解決分布式系統(tǒng)中負載均衡的問題時候可以使用Hash算法讓固定的一部分請求落到同一臺服務器上,這樣每臺服務器固定處理一部分請求(并維護這些請求的信息),起到負載均衡的作用。

但是普通的余數hash(hash(比如用戶id)%服務器機器數)算法伸縮性很差,當新增或者下線服務器機器時候,用戶id與服務器的映射關系會大量失效。一致性hash則利用hash環(huán)對其進行了改進。

二、一致性Hash概述

為了能直觀的理解一致性hash原理,這里結合一個簡單的例子來講解,假設有4臺服務器,地址為ip1,ip2,ip3,ip4。

  • 一致性hash是首先計算四個ip地址對應的hash值

    hash(ip1),hash(ip2),hash(ip3),hash(ip3),計算出來的hash值是0~最大正整數直接的一個值,這四個值在一致性hash環(huán)上呈現如下圖:

  • hash環(huán)上順時針從整數0開始,一直到最大正整數,我們根據四個ip計算的hash值肯定會落到這個hash環(huán)上的某一個點,至此我們把服務器的四個ip映射到了一致性hash環(huán)

  • 當用戶在客戶端進行請求時候,首先根據hash(用戶id)計算路由規(guī)則(hash值),然后看hash值落到了hash環(huán)的那個地方,根據hash值在hash環(huán)上的位置順時針找距離最近的ip作為路由ip.

如上圖可知user1,user2的請求會落到服務器ip2進行處理,User3的請求會落到服務器ip3進行處理,user4的請求會落到服務器ip4進行處理,user5,user6的請求會落到服務器ip1進行處理。

下面考慮當ip2的服務器掛了的時候會出現什么情況?

當ip2的服務器掛了的時候,一致性hash環(huán)大致如下圖:

根據順時針規(guī)則可知user1,user2的請求會被服務器ip3進行處理,而其它用戶的請求對應的處理服務器不變,也就是只有之前被ip2處理的一部分用戶的映射關系被破壞了,并且其負責處理的請求被順時針下一個節(jié)點委托處理。

下面考慮當新增機器的時候會出現什么情況?

當新增一個ip5的服務器后,一致性hash環(huán)大致如下圖:

根據順時針規(guī)則可知之前user1的請求應該被ip1服務器處理,現在被新增的ip5服務器處理,其他用戶的請求處理服務器不變,也就是新增的服務器順時針最近的服務器的一部分請求會被新增的服務器所替代。

三、一致性hash的特性

  • 單調性(Monotonicity),單調性是指如果已經有一些請求通過哈希分派到了相應的服務器進行處理,又有新的服務器加入到系統(tǒng)中時候,應保證原有的請求可以被映射到原有的或者新的服務器中去,而不會被映射到原來的其它服務器上去。 這個通過上面新增服務器ip5可以證明,新增ip5后,原來被ip1處理的user6現在還是被ip1處理,原來被ip1處理的user5現在被新增的ip5處理。

  • 分散性(Spread):分布式環(huán)境中,客戶端請求時候可能不知道所有服務器的存在,可能只知道其中一部分服務器,在客戶端看來他看到的部分服務器會形成一個完整的hash環(huán)。如果多個客戶端都把部分服務器作為一個完整hash環(huán),那么可能會導致,同一個用戶的請求被路由到不同的服務器進行處理。這種情況顯然是應該避免的,因為它不能保證同一個用戶的請求落到同一個服務器。所謂分散性是指上述情況發(fā)生的嚴重程度。好的哈希算法應盡量避免盡量降低分散性。 一致性hash具有很低的分散性

  • 平衡性(Balance):平衡性也就是說負載均衡,是指客戶端hash后的請求應該能夠分散到不同的服務器上去。一致性hash可以做到每個服務器都進行處理請求,但是不能保證每個服務器處理的請求的數量大致相同,如下圖

服務器ip1,ip2,ip3經過hash后落到了一致性hash環(huán)上,從圖中hash值分布可知ip1會負責處理大概80%的請求,而ip2和ip3則只會負責處理大概20%的請求,雖然三個機器都在處理請求,但是明顯每個機器的負載不均衡,這樣稱為一致性hash的傾斜,虛擬節(jié)點的出現就是為了解決這個問題。如果想學習Java工程化、高性能及分布式、深入淺出。微服務、Spring,MyBatis,Netty源碼分析的朋友可以加Java進階群:582505643,群里有阿里大牛直播講解技術,以及Java大型互聯(lián)網技術的視頻免費分享給大家。

五、虛擬節(jié)點

當服務器節(jié)點比較少的時候會出現上節(jié)所說的一致性hash傾斜的問題,一個解決方法是多加機器,但是加機器是有成本的,那么就加虛擬節(jié)點,比如上面三個機器,每個機器引入1個虛擬節(jié)點后的一致性hash環(huán)的圖如下:

其中ip1-1是ip1的虛擬節(jié)點,ip2-1是ip2的虛擬節(jié)點,ip3-1是ip3的虛擬節(jié)點。

可知當物理機器數目為M,虛擬節(jié)點為N的時候,實際hash環(huán)上節(jié)點個數為M*N。比如當客戶端計算的hash值處于ip2和ip3或者處于ip2-1和ip3-1之間時候使用ip3服務器進行處理。

六、均勻一致性hash

上節(jié)我們使用虛擬節(jié)點后的圖看起來比較均衡,但是如果生成虛擬節(jié)點的算法不夠好很可能會得到下面的環(huán):

可知每個服務節(jié)點引入1個虛擬節(jié)點后,情況相比沒有引入前均衡性有所改善,但是并不均衡。

均衡的一致性hash應該是如下圖:

均勻一致性hash的目標是如果服務器有N臺,客戶端的hash值有M個,那么每個服務器應該處理大概M/N個用戶的。也就是每臺服務器負載盡量均衡

七、總結

在分布式系統(tǒng)中一致性hash起著不可忽略的地位,無論是分布式緩存,還是分布式Rpc框架的負載均衡策略都有所使用。

  • 1.公司登記注冊于2003年1月27日,清遠市桑達電子網絡媒體有限公司
    2.公司2006年起成為清遠市政府定點協(xié)議供貨商,電子采購供貨商
    3.公司2007年被清遠市相關政府部門評為安防行業(yè)狀元
    4.公司2007年起成為長城電腦清遠如意服務站(SP368)
    5.公司2007年承建清遠市橫河路口電子警察工程,開創(chuàng)清遠電子警察先河。
  • 6.公司2007年起成為IBM合作伙伴、公司2010年底成為金蝶軟件清遠金牌代理(伙伴編號:30030013)
    7.公司組團隊參加南方都市報組織的創(chuàng)富評選,獲廣東80強。公司申請多項軟件著作權、專利權
    8.2016年起公司成為粵東西北地區(qū)為數不多的雙軟企業(yè),確立“讓軟件驅動世界,讓智能改變生活!"企業(yè)理想
    9.2016-01-29更名為廣東互動電子網絡媒體有限公司
    10.2021-01-13更名為廣東互動電子有限公司
  • 投資合作咨詢熱線電話:0763-3391888 3323588
  • 做一個負責任的百年企業(yè)! 天行健,君子以自強不息;地勢坤,君子以厚德載物;
    為用戶創(chuàng)造價值! 讓軟件驅動世界; 讓智能改變生活; 超越顧客期望,幫助顧客成功;
    對客戶負責,對員工負責,對企業(yè)命運負責!幫助支持公司的客戶成功;幫助忠誠于公司的員工成功!
  • 聯(lián)系電話:0763-3391888 3323588 3318977
    服務熱線:18023314222 QQ:529623964
  • 工作QQ:2501204690 商務QQ: 602045550
    投資及業(yè)務投訴QQ: 529623964
    微信:小米哥 微信號:qysed3391888
    騰訊微博:桑達網絡-基石與起點
  • E-MAIL:222#QYSED.CN ok3391888#163.com (請用@替換#)
在線客服
  • 系統(tǒng)集成咨詢
    點擊這里給我發(fā)消息
  • 網站\微信\軟件咨詢
    點擊這里給我發(fā)消息
  • 售后服務
    點擊這里給我發(fā)消息
  • 投資合作
    點擊這里給我發(fā)消息