尚矽谷大資料Hadoop(22)P80-P84DataNode工作機制,資料完整性,服役新資料節點,退役舊資料節點,
P80-6.1DataNode工作機制
第6章 DataNode(面試開發重點)
6.1 DataNode工作機制
DataNode工作機制,如圖3-15所示。
圖3-15 DataNode工作機制
1)一個資料塊在DataNode上以檔案形式儲存在磁碟上,包括兩個檔案,一個是資料本身,一個是後設資料包括資料塊的長度,塊資料的校驗和,以及時間戳。
2)DataNode啟動後向NameNode註冊,通過後,週期性(1小時)的向NameNode上報所有的塊資訊。
3)心跳是每3秒一次,心跳返回結果帶有NameNode給該DataNode的命令如複製塊資料到另一臺機器,或刪除某個資料塊。如果超過10分鐘沒有收到某個DataNode的心跳,則認為該節點不可用。
4)叢集執行中可以安全加入和退出一些機器。
相關文章
- 大資料hadoop資料大資料Hadoop
- mongo資料庫單節點搭建Go資料庫
- 好程式設計師大資料獨家解析-hadoop五大節點程式設計師大資料Hadoop
- 尚矽谷springboot視訊資料分享Spring Boot
- 尚矽谷大資料視訊_Shell視訊教程大資料
- bitcoin: 透過 rpc 請求節點資料RPC
- 3節點RAC資料庫夯故障分析資料庫
- Gbase 8a資料庫節點替換資料庫
- 資料庫——查詢樹形結構某節點的所有子節點、所有父節點資料庫
- 如何讓 MGR 不從 Primary 節點克隆資料?
- 資料分析工作包括哪些環節?
- Hadoop大資料部署Hadoop大資料
- 大資料hadoop工具大資料Hadoop
- 2018春節旅行大資料分析大資料
- 大資料的優點大資料
- 大資料的特點大資料
- 極光大資料:2018春節期間熱點app資料觀察(附下載)大資料APP
- 資料庫 資料庫的完整性資料庫
- Kubernetes 遷移節點 Kubelet 資料儲存目錄
- DataNode工作機制 & 新增節點 &下線節點
- 資料完整性
- **大資料hadoop瞭解**大資料Hadoop
- 怎樣獲取jstree的節點資料_大資料獲客是怎樣獲取精準客源的JS大資料
- 什麼是大資料?大資料的產生、特點、用途大資料
- 大資料學習之Hadoop如何高效處理大資料大資料Hadoop
- 大資料叢集 CentOS 7.7 節點初始化( 同 CentOS 6X 不同點)大資料CentOS
- 1024程式設計師節最新福利之2018最全大資料資料集合程式設計師大資料
- 尚矽谷大資料技術之Flink最佳化_V2大資料
- 【伺服器資料恢復】Vsan節點虛擬機器磁碟元件出現故障的資料恢復案例伺服器資料恢復虛擬機元件
- 大資料處理流程包括哪些環節大資料
- 大資料有何特點?_光點科技大資料
- 熱點資料和冷資料是什麼?
- Hadoop資料模型Hadoop模型
- 淺析大資料框架 Hadoop大資料框架Hadoop
- 常用資料清洗方法大盤點
- 聊聊分散式資料庫中單節點故障的影響分散式資料庫
- 原來大資料 Hadoop 是這樣儲存資料的大資料Hadoop
- 大資料的四大特點大資料