zookeeper:spark-project專案的zookeeper配置
安裝ZooKeeper
1、將zookeeper-3.4.5-cdh5.3.6.tar.gz使用WinSCP拷貝到sparkproject1的/usr/local目錄下。
2、對zookeeper-3.4.5-cdh5.3.6.tar.gz進行解壓縮:tar -zxvf zookeeper-3.4.5-cdh5.3.6.tar.gz。
3、對zookeeper目錄進行重新命名:mv zookeeper-3.4.5-cdh5.3.6 zk。
4、配置zookeeper相關的環境變數
vi ~/.bashrc
export ZOOKEEPER_HOME=/usr/local/zk
export PATH=$ZOOKEEPER_HOME/bin
source ~/.bashrc
配置zoo.cfg
cd zk/conf mv zoo_sample.cfg zoo.cfg
vi zoo.cfg 修改:dataDir=/usr/local/zk/data 新增: server.0=sparkproject1:2888:3888 server.1=sparkproject2:2888:3888 server.2=sparkproject3:2888:3888 |
設定zk節點標識
cd zk
mkdir data
cd data
vi myid //這個myid檔案內容是叢集中各個節點的標識,必須是數字,到後續應該對每臺機器依次修改
0
搭建zk叢集
1、在另外兩個節點上按照上述步驟配置ZooKeeper,使用scp將zk和.bashrc拷貝到spark2和spark3上即可。
2、唯一的區別是spark2和spark3的標識號myid分別設定為1和2。
啟動ZooKeeper叢集
1、分別在三臺機器上執行:zkServer.sh start。
2、檢查ZooKeeper狀態:zkServer.sh status,應該是一個leader,兩個follower
3、jps:檢查三個節點是否都有QuromPeerMain程式。
相關文章
- zookeeper:spark-project專案的hive和mysql配置SparkProjectHiveMySql
- ZooKeeper系列(4):ZooKeeper的配置檔案詳解
- Flume:spark-project專案的flume配置SparkProject
- hadoop:spark-project專案的hadoop配置HadoopSparkProject
- 【專案中遇到的zookeeper的問題】
- Zookeeper 安裝配置
- kafka:spark-project專案的kafka和scala配置KafkaSparkProject
- CentOS:spark-project專案的CentOS 6.4安裝配置CentOSSparkProject
- 啟動Dubbo專案註冊Zookeeper時提示zookeeper not connected異常原理解析
- ZooKeeper分散式專題(一) -- zookeeper安裝以及介紹分散式
- 【zookeeper】zookeeper分散式鎖分散式
- ZooKeeper 06 - ZooKeeper 的常用命令
- ZooKeeper學習筆記三:使用ZooKeeper實現一個簡單的配置中心筆記
- Windows單機配置Zookeeper環境Windows
- 基於zookeeper的分散式配置中心(一)分散式
- Zookeeper-3.4.10 叢集的安裝配置
- zookeeper
- 【Zookeeper】zookeeper客戶端KeeperErrorCode = ConnectionLoss客戶端Error
- 【zookeeper之七】Zookeeper客戶端客戶端
- ZooKeeper分散式專題(二) -- zookeeper應用場景及資料模型分散式模型
- 將zookeeper curator與springboot專案進行整合(重點)Spring Boot
- ZooKeeper: 簡介, 配置及運維指南運維
- ZooKeeper 系列(一)—— ZooKeeper核心概念詳解
- zookeeper學習04 zookeeper收尾+dubbo前瞻
- Zookeeper原始碼分析(二) —– zookeeper日誌原始碼
- Zookeeper原始碼分析(二) ----- zookeeper日誌原始碼
- Zookeeper系列一:Zookeeper基礎命令操作
- zookeeper理解
- Kafka——zookeeper的作用Kafka
- Zookeeper的安裝
- ZooKeeper 05 - ZooKeeper 叢集的腦裂問題(Split Brain)AI
- [Zookeeper-01]什麼是zookeeper?& Linux / Windows Zookeeper安裝和部署(單點)LinuxWindows
- ZooKeeper筆記(1):ZooKeeper特性與基本概念筆記
- ZooKeeper系列(2):ZooKeeper命令列工具zkCli.sh命令列
- 手摸手教你閱讀和除錯大型開源專案 ZooKeeper除錯
- zookeeper叢集的搭建
- Zookeeper 新手教程
- ZooKeeper淺談