好程式設計師大資料學習路線之zookeeper乾貨
好程式設計師大資料學習路線之 zookeeper 乾貨, 上週學習了zookeeper,一開始感覺不容易理解,後來隨著學習的深入,漸漸地明白了很多知識,下面慢慢來介紹zookeeper。
zookeeper是什麼???
zookeeper是一個分散式協調服務,就是為使用者的分散式應用程式提供協調服務的。
zookeeper是為其他的分散式程式提供服務的
zookeeper本身就是一個分散式程式(只要半數以上節點存活,就能提供服務)
zookeeper的特性:
zookeeper:一個leader,多個follower
全域性資料一致性:每個server都儲存一份相同的資料,client無論連線那臺伺服器,都可以得到相同的資料
分散式讀寫,更新請求轉發,由leader實施資料更新的寫操作
更新請求按順序執行,來自同一個client的更新請求會按照其傳送的順序來執行
資料更新的原子性,一次資料要麼更新成功,要麼失敗。
實時性,在一定時間範圍內,client能讀到最新的資料。
應用場景:
統一命名服務;配置管理;叢集管理;共享鎖;佇列管理;
Zookeeper 作為 Hadoop 專案中的一個子專案,是 Hadoop 叢集管理的一個必不可少的模組,它主要用來控制叢集中的資料,如它管理 Hadoop 叢集中的 NameNode,還有 Hbase 中 Master Election、Server 之間狀態同步等。
本文介紹的Zookeeper 的基本知識,以及介紹了幾個典型的應用場景。這些都是 Zookeeper 的基本功能,最重要的是 Zoopkeeper 提供了一套很好的分散式叢集管理的機制,就是它這種基於層次型的目錄樹的資料結構,並對樹中的節點進行有效管理,從而可以設計出多種多樣的分散式的資料管 理模型,而不僅僅侷限於上面提到的幾個常用應用場景。
選舉機制:
1.伺服器ID:資料ID(編號)越大在選擇演算法中的權重越大
2.資料ID:伺服器中存放的資料最大ID、值越大說明資料越新,在選舉演算法種資料越新權重越大。
3.邏輯時鐘:即投票的次數,同一投票過程中的邏輯時鐘都是相同的。每投完一次票這個資料就會加一然後與接收到的其它伺服器返回的投票資訊中的數值相比,根據不同的值做出不同的判斷。
三大功能:
1.為使用者提供資料的註冊和查詢服務
2.為使用者提供資料節點的監聽註冊服務
3.跟使用者之間保持心跳通訊以感知使用者的狀態
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69913892/viewspace-2655276/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 好程式設計師大資料學習路線Hadoop學習乾貨分享程式設計師大資料Hadoop
- 好程式設計師大資料學習路線分享hdfs學習乾貨程式設計師大資料
- 好程式設計師大資料學習路線之mapreduce概述程式設計師大資料
- 好程式設計師大資料學習路線分享大資料之字串程式設計師大資料字串
- 好程式設計師大資料學習路線分享spark之Scala程式設計師大資料Spark
- 好程式設計師大資料學習路線分享大資料之執行緒程式設計師大資料執行緒
- 好程式設計師大資料學習路線分享MAPREDUCE程式設計師大資料
- 好程式設計師大資料學習路線分享SparkSQl程式設計師大資料SparkSQL
- 好程式設計師大資料學習路線分享Scala系列之物件程式設計師大資料物件
- 好程式設計師大資料學習路線之hive儲存格式程式設計師大資料Hive
- 好程式設計師大資料學習路線之大資料自學路線二程式設計師大資料
- 好程式設計師大資料學習路線之大資料自學路線一程式設計師大資料
- 好程式設計師大資料學習路線分享大資料之基礎語法程式設計師大資料
- 好程式設計師大資料學習路線分享Hbase指令學習程式設計師大資料
- 好程式設計師大資料學習路線Hbase總結程式設計師大資料
- 好程式設計師大資料學習路線之hive表的查詢程式設計師大資料Hive
- 好程式設計師大資料學習路線之Logstach與flume對比程式設計師大資料
- 好程式設計師大資料學習路線分享Scala系列之抽象類程式設計師大資料抽象
- 好程式設計師大資料學習路線分享Scala系列之陣列程式設計師大資料陣列
- 好程式設計師大資料學習路線分享Scala系列之泛型程式設計師大資料泛型
- 好程式設計師分享自學大資料入門乾貨程式設計師大資料
- 好程式設計師大資料學習路線分享HDFS學習總結程式設計師大資料
- 好程式設計師大資料學習路線分享Actor學習筆記程式設計師大資料筆記
- 好程式設計師大資料學習路線分享Map學習筆記程式設計師大資料筆記
- 好程式設計師大資料學習路線分享Scala系列之對映Map程式設計師大資料
- 好程式設計師大資料學習路線分享Scala系列之基礎篇程式設計師大資料
- 好程式設計師大資料學習路線分享HDFS讀流程程式設計師大資料
- 好程式設計師大資料學習路線分享AWK詳解程式設計師大資料
- 好程式設計師大資料學習路線分享UDF函式程式設計師大資料函式
- 好程式設計師大資料學習路線分享Lambda表示式程式設計師大資料
- 好程式設計師Java學習路線之集程式設計師Java
- 好程式設計師大資料學習路線分享Scala系列之集合操作函式程式設計師大資料函式
- 好程式設計師大資料學習路線分享高階函式程式設計師大資料函式
- 好程式設計師大資料學習路線hive內部函式程式設計師大資料Hive函式
- 好程式設計師大資料學習路線分享Hadoop機架感知程式設計師大資料Hadoop
- 好程式設計師大資料學習路線分享TCP和UDP學習筆記程式設計師大資料TCPUDP筆記
- 好程式設計師大資料學習路線分享MapReduce全過程解析程式設計師大資料
- 好程式設計師大資料學習路線分享hive的執行方式程式設計師大資料Hive