少年阿賓

          那些青春的歲月

            BlogJava :: 首頁 :: 聯系 :: 聚合  :: 管理
            500 Posts :: 0 Stories :: 135 Comments :: 0 Trackbacks
          Zookeeper的核心是原子廣播,這個機制保證了各個Server之間的同步。實現這個機制的協議叫做Zab協議。Zab協議有兩種模式,它們分別是恢復模式(選主)和廣播模式(同步)。當服務啟動或者在領導者崩潰后,Zab就進入了恢復模式,當領導者被選舉出來,且大多數Server完成了和leader的狀態同步以后,恢復模式就結束了。狀態同步保證了leader和Server具有相同的系統狀態。
          為了保證事務的順序一致性,zookeeper采用了遞增的事務id號(zxid)來標識事務。所有的提議(proposal)都在被提出的時候加上了zxid。實現中zxid是一個64位的數字,它高32位是epoch用來標識leader關系是否改變,每次一個leader被選出來,它都會有一個新的epoch,標識當前屬于那個leader的統治時期。低32位用于遞增計數。
          每個Server在工作過程中有三種狀態:
          LOOKING:當前Server不知道leader是誰,正在搜尋
          LEADING:當前Server即為選舉出來的leader
          FOLLOWING:leader已經選舉出來,當前Server與之同步
           
          Leader選舉流程: 
          當leader崩潰或者leader失去大多數的follower,這時候zk進入恢復模式,恢復模式需要重新選舉出一個新的leader,讓所有的Server都恢復到一個正確的狀態。Zk的選舉算法有兩種:一種是基于basic paxos實現的,另外一種是基于fast paxos算法實現的。系統默認的選舉算法為fast paxos。先介紹basic paxos流程:
          1 .選舉線程由當前Server發起選舉的線程擔任,其主要功能是對投票結果進行統計,并選出推薦的Server;
          2 .選舉線程首先向所有Server發起一次詢問(包括自己);
          3 .選舉線程收到回復后,驗證是否是自己發起的詢問(驗證zxid是否一致),然后獲取對方的id(myid),并存儲到當前詢問對象列表中,最后獲取對方提議的leader相關信息( id,zxid),并將這些信息存儲到當次選舉的投票記錄表中;
          4. 收到所有Server回復以后,就計算出zxid最大的那個Server,并將這個Server相關信息設置成下一次要投票的Server;
          5. 線程將當前zxid最大的Server設置為當前Server要推薦的Leader,如果此時獲勝的Server獲得n/2 + 1的Server票數, 設置當前推薦的leader為獲勝的Server,將根據獲勝的Server相關信息設置自己的狀態,否則,繼續這個過程,直到leader被選舉出來。
          通過流程分析我們可以得出:要使Leader獲得多數Server的支持,則Server總數必須是奇數2n+1,且存活的Server的數目不得少于n+1.
          每個Server啟動后都會重復以上流程。在恢復模式下,如果是剛從崩潰狀態恢復的或者剛啟動的server還會從磁盤快照中恢復數據和會話信息,zk會記錄事務日志并定期進行快照,方便在恢復時進行狀態恢復。



          fast paxos流程是在選舉過程中,某Server首先向所有Server提議自己要成為leader,當其它Server收到提議以后,解決epoch和zxid的沖突,并接受對方的提議,然后向對方發送接受提議完成的消息,重復這個流程,最后一定能選舉出Leader。


          zookeeper數據同步過程: 
          選完leader以后,zk就進入狀態同步過程。
          1. leader等待server連接;
          2 .Follower連接leader,將最大的zxid發送給leader;
          3 .Leader根據follower的zxid確定同步點;
          4 .完成同步后通知follower 已經成為uptodate狀態;
          5 .Follower收到uptodate消息后,又可以重新接受client的請求進行服務了。



          工作流程 
          Leader工作流程 
          Leader主要有三個功能:
          1 .恢復數據;
          2 .維持與Learner的心跳,接收Learner請求并判斷Learner的請求消息類型;
          3 .Learner的消息類型主要有PING消息、REQUEST消息、ACK消息、REVALIDATE消息,根據不同的消息類型,進行不同的處理。
          PING消息是指Learner的心跳信息;REQUEST消息是Follower發送的提議信息,包括寫請求及同步請求;ACK消息是Follower的對提議的回復,超過半數的Follower通過,則commit該提議;REVALIDATE消息是用來延長SESSION有效時間。Leader的工作流程簡圖如下所示,在實際實現中,流程要比下圖復雜得多,啟動了三個線程來實現功能。



          2.3.2 Follower工作流程 
          Follower主要有四個功能:
          1. 向Leader發送請求(PING消息、REQUEST消息、ACK消息、REVALIDATE消息);
          2 .接收Leader消息并進行處理;
          3 .接收Client的請求,如果為寫請求,發送給Leader進行投票;
          4 .返回Client結果。
          Follower的消息循環處理如下幾種來自Leader的消息:
          1 .PING消息:心跳消息;
          2 .PROPOSAL消息:Leader發起的提案,要求Follower投票;
          3 .COMMIT消息:服務器端最新一次提案的信息;
          4 .UPTODATE消息:表明同步完成;
          5 .REVALIDATE消息:根據Leader的REVALIDATE結果,關閉待revalidate的session還是允許其接受消息;
          6 .SYNC消息:返回SYNC結果到客戶端,這個消息最初由客戶端發起,用來強制得到最新的更新。
          Follower的工作流程簡圖如下所示,在實際實現中,Follower是通過5個線程來實現功能的。





          http://www.it165.net/admin/html/201405/2997.html
          posted on 2015-04-22 01:05 abin 閱讀(330) 評論(0)  編輯  收藏

          只有注冊用戶登錄后才能發表評論。


          網站導航:
          博客園   IT新聞   Chat2DB   C++博客   博問  
           
          主站蜘蛛池模板: 濉溪县| 南召县| 兴业县| 永顺县| 青阳县| 自治县| 普陀区| 永和县| 武义县| 阆中市| 绵阳市| 彭水| 云林县| 河北区| 明光市| 鹤岗市| 调兵山市| 沛县| 东乌珠穆沁旗| 恩平市| 新乡县| 广德县| 霍城县| 桑植县| 和林格尔县| 巢湖市| 曲周县| 甘孜县| 辉南县| 怀化市| 阿拉善右旗| 红河县| 翼城县| 舞钢市| 锦屏县| 双江| 大港区| 浑源县| 阳信县| 武汉市| 饶平县|