Hadoop2.7實戰v1.0之動態新增、刪除DataNode節點及複製策略導向
一.環境
|
IP |
Host 及安裝軟體 |
部署模組 |
程式 |
|
172.16.101.55 |
sht-sgmhadoopnn-01 hadoop |
NameNode ResourceManager |
NameNode DFSZKFailoverController ResourceManager |
|
172.16.101.56 |
sht-sgmhadoopnn-02 hadoop |
NameNode ResourceManager |
NameNode DFSZKFailoverController ResourceManager |
|
172.16.101.58 |
sht-sgmhadoopdn-01 hadoop、zookeeper |
DataNode NodeManager Zookeeper |
DataNode NodeManager JournalNode QuorumPeerMain |
|
172.16.101.59 |
sht-sgmhadoopdn-02 Hadoop、zookeeper |
DataNode NodeManager Zookeeper |
DataNode NodeManager JournalNode QuorumPeerMain |
|
172.16.101.60 |
sht-sgmhadoopdn-03 Hadoop、zookeeper |
DataNode NodeManager Zookeeper |
DataNode NodeManager JournalNode QuorumPeerMain |
|
172.16.101.66 |
sht-sgmhadoopdn-04(add/del) Hadoop |
DataNode NodeManager
|
DataNode NodeManager
|
###當前環境是hadoop-2.7.2+zookeeper-3.4.6完全分散式環境，HDFS HA+YARN HA。
在hdfs-site.xml檔案中，dfs.replication為3。
dfs.replication
3
#下面均採取動態新增、刪除節點方式,而不是靜態方式(相當於起初部署叢集一樣，停止namenode，新增一個datanode資料節點，這種方法不適合用於線上提供服務的場景，具體操作，檢視參考連結)。
二.動態新增DataNode和NodeManager節點(不修改dfs.replication)【終極版】
http://blog.itpub.net/30089851/viewspace-2055168/
三.新增DataNode節點後,更改檔案複製策略dfs.replication
http://blog.itpub.net/30089851/viewspace-2047825/
四.動態刪除DataNode和NodeManager節點(修改dfs.replication) 【終極版】
http://blog.itpub.net/30089851/viewspace-2049648/
五.參考
http://my.oschina.net/leoleong/blog/477508
來自 “ ITPUB部落格 ” ，連結：http://blog.itpub.net/30089851/viewspace-2043018/，如需轉載，請註明出處，否則將追究法律責任。
相關文章
- Hadoop2.7實戰v1.0之新增DataNode節點後,更改檔案複製策略dfs.replicationHadoop
- Hadoop2.7實戰v1.0之動態刪除DataNode(含NodeManager)節點(修改dfs.replication)Hadoop
- 怎樣新增、刪除、移動、複製、建立、查詢節點
- Hyperledger Fabric節點的動態新增和刪除
- 節點操作（刪除，複製）/案例1：刪除留言板的留言 /案例2：動態生成表格
- Hadoop2.7實戰v1.0之YARN HAHadoopYarn
- Hadoop2.7實戰v1.0之HDFS HAHadoop
- DataNode工作機制 & 新增節點 &下線節點
- redis cluster節點/新增刪除操作Redis
- mongodb副本集新增刪除節點MongoDB
- networkx基礎用法:新增節點、新增邊、刪除節點、刪除邊、計算度、賦權重
- Hadoop2.7實戰v1.0之JVM引數調優HadoopJVM
- HDFS動態新增節點
- 【Mongodb】 replica set 新增和刪除節點。MongoDB
- Hadoop2.7實戰v1.0之Linux引數調優HadoopLinux
- oracle11g_RAC新增刪除節點Oracle
- JavaScript 動態新增與刪除元素JavaScript
- oracle 10g rac，刪除故障節點並新增新節點Oracle 10g
- oracle 10g rac 新增節點與刪除節點步驟Oracle 10g
- Hadoop2.7實戰v1.0之HBase1.1.5 HA分散式搭建Hadoop分散式
- 實戰goldengate之ora-To-ora單向複製Go
- 新增和刪除hadoop叢集中的節點Hadoop
- JavaScript動態新增或者刪除HTML元素JavaScriptHTML
- jQuery動態新增和刪除表格行jQuery
- JavaScript動態新增和刪除div元素JavaScript
- javascript如何動態新增和刪除元素JavaScript
- Hadoop2.7實戰v1.0之Hive-2.0.0+MySQL本地模式安裝HadoopHiveMySql模式
- Tree樹狀圖的動態增刪查改（中）新增節點
- 11G R2 RAC新增刪除節點
- jquery動態新增和刪除<input type="file" />jQuery
- 如何動態新增和刪除一個div
- Android中ListView動態新增刪除項AndroidView
- jQuery動態新增和刪除表格記錄jQuery
- Hadoop2.7實戰v1.0之Hive-2.0.0+MySQL遠端模式安裝HadoopHiveMySql模式
- javascript實現的動態新增和刪除表格行程式碼JavaScript行程
- Oracle10g RAC 刪除及加入節點Oracle
- 使用joinjs繪製流程圖（七）-實戰-繪製流程圖+節點設定樣式+節點新增事件JS流程圖事件
- k8s叢集刪除和新增node節點K8S