好程式設計師大資料培訓之ZooKeeper應用-解決分散式系統單點故障

大資料課程涵蓋Java、spark、Hadoop等內容，而不是Java中涵蓋大資料，現在是大資料的時代，學習大資料課程之前必須先了解大資料課程大綱，否則很容易學到假的大資料課程。

　　今天小編給大家分享一下：ZooKeeper應用--解決分散式系統單點故障

　　1.單點故障問題

　　什麼是分散式系統中的單點故障：通常分散式系統採用主從模式，就是一個主控機連線多個處理節點。主節點負責分發任務，從節點負責處理任務，當我們的主節點發生故障時，那麼整個系統就都癱瘓了，那麼我們把這種故障叫作單點故障。如下圖

　　傳統方式是採用一個備用節點，這個備用節點定期給當前主節點傳送ping包，主節點收到ping包以後向備用節點傳送回復Ack，當備用節點收到回覆的時候就會認為當前主節點還活著，讓他繼續提供服務。如下圖所示：

　　但是這種方式就是有一個隱患，就是網路問題，來看一網路問題會造成什麼後果

　　也就是說我們的主節點的並沒有掛，只是在回覆的時候網路發生故障，這樣我們的備用節點同樣收不到回覆，就會認為主節點掛了，然後備用節點將他的Master例項啟動起來，這樣我們的分散式系統當中就有了兩個主節點也就是---雙Master， 出現雙Master以後我們的從節點就會將它所做的事一部分彙報給了主節點，一部分彙報給了備用節點，這樣服務就全亂了。為了防止出現這種情況，我們引入了 ZooKeeper，它雖然不能避免網路故障，但它能夠保證每時每刻只有一個Master。

　　2.ZooKeeper解決方案

　　在引入了Zookeeper以後，我們啟動了兩個主節點，"主節點-A"和"主節點-B"他們啟動以後，都向ZooKeeper去註冊一個節點。我們 假設"主節點-A"鎖註冊地節點是"master-00001"，"主節點-B"註冊的節點是"master-00002"，註冊完以後進行選舉，編號最小的節點將在選舉中獲勝獲得鎖成為主節點，也就是我們的"主節點-A"將會獲得鎖成為主節點，然後"主節點-B"將被阻塞成為一個備用節點。那麼，透過這 種方式就完成了對兩個Master程式的排程。

　　如果"主節點-A"掛了，這時候他所註冊的節點將被自動刪除，ZooKeeper會自動感知節點的變化，然後再次發出選舉，這時候"主節點-B"將在選舉中獲勝，替代"主節點-A"成為主節點。

　　3.Master 恢復

　　如果主節點恢復了，他會再次向ZooKeeper註冊一個節點，這時候他註冊的節點將會是"master-00003"，ZooKeeper會感知節點的變化再次發動選舉，這時候"主節點-B"在選舉中會再次獲勝繼續擔任"主節點"，"主節點-A"會擔任備用節點。

　　 好程式設計師 的大資料技術分享