### 歡迎訪問我的GitHub
> 這裡分類和彙總了欣宸的全部原創(含配套原始碼)：[https://github.com/zq2599/blog_demos](https://github.com/zq2599/blog_demos)

- 今天來一起實戰Linux環境下搭建elasticsearch6.5.4叢集和Head外掛；

### 環境資訊
- 作業系統：Ubuntu 16.04.5 LTS
- JDK：1.8.0_191
- elasticsearch：6.5.4
- nodejs：v10.15.0

- 本次實戰準備了兩臺機器，它們的基本情況如下所示：

IP地址 |hostname | 備註
---|---|---
192.168.119.152 | node-0| 節點0
192.168.119.153 | node-1| 節點1

### 操作步驟整理
- 整個實戰由以下操作步驟組成，**注意：有的步驟需要在兩臺機器上都要做，在具體操作的地方，我會用紅字說明**：

1. 修改主機名；
2. 修改hosts;
3. 修改linux檔案描述符限制；
4. 修改最大執行緒數限制；
5. 修改記憶體限制；
6. 安裝JDK；
7. 建立使用者；
8. 給es使用者增加sudo許可權
9. 安裝elasticsearch；
10. 在node-0機器安裝nodejs
11. 設定elasticsearch；
12. 啟動elasticsearch
13. 安裝head元件（只在node-0上安裝）
14. 驗證

### 修改主機名
- **注意：以下的操作在node-0和node-1兩臺機器上都要做**
- 開啟檔案**/etc/hostname**，將內容修改為本次實戰所需的hostname(node-0和node-1)；

### 修改hosts
- **注意：以下的操作在node-0和node-1兩臺機器上都要做**

- 開啟檔案令**/etc/hosts**，增加以下兩行，讀者請注意改為自己機器的IP地址：

```shell
192.168.119.152 node-0
192.168.119.153 node-1
```

### 修改linux檔案描述符限制
- **注意：以下的操作在node-0和node-1兩臺機器上都要做**

- 執行命令**ulimit -Hn**，檢視硬限制：

```shell
[root@localhost es]# ulimit -Hn
4096
```

- 執行命令**ulimit -Sn**，檢視軟限制(程式中可以提升)：

```shell
[root@localhost es]# ulimit -Sn
1024
```

- 上述限制會導致elasticsearch啟動失敗，所以需要調整；

- 開啟檔案**/etc/security/limits.conf**，增加以下兩行設定（注意，如果是已有配置就修改對應的值）：

```shell
*               soft    nofile           65536
*               hard    nofile           65536
```

- 修改完成後退出重新登入，再次檢視發現配置已經生效：

```shell
[root@localhost ~]# ulimit -Hn
65536
[root@localhost ~]# ulimit -Sn
65536
```

### 修改最大執行緒數限制
- **注意：以下的操作在node-0和node-1兩臺機器上都要做**
- 開啟檔案**/etc/security/limits.conf**，增加以下兩行設定（注意，如果是已有配置就修改對應的值）：

```shell
*               soft    nproc           4096
*               hard    nproc           4096
```

- 修改完畢後，需要重啟才會生效；

### 修改記憶體限制
- **注意：以下的操作在node-0和node-1兩臺機器上都要做**
- 修改程式中記憶體對映區域的最大數量，修改/etc/sysctl.conf檔案，增加以下配置（注意，如果是已有配置就修改對應的值）：

```shell
vm.max_map_count=262144
```

- 修改完成後，重啟生效；

### 安裝JDK
- **注意：以下的操作在node-0和node-1兩臺機器上都要做**
- 在官網下載JDK，地址是https://www.oracle.com/technetwork/java/index.html ，在上面選擇合適的版本下載；
- 將下載的JDK安裝檔案放在目錄**/usr/lib/jvm**，解壓；
- 我這邊JDK解壓後的完整路徑是**/usr/lib/jvm/jdk1.8.0_191**，在/etc/profile檔案增加以下內容：

```shell
export JAVA_HOME=/usr/lib/jvm/jdk1.8.0_191
export JRE_HOME=${JAVA_HOME}/jre
export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib
export PATH=${JAVA_HOME}/bin:$PATH
```

- 修改完畢後執行命令**source /etc/profile**使設定立即生效，執行**java -version**檢視設定是否成功：

```shell
[root@localhost jdk1.8.0_191]# java -version
java version "1.8.0_191"
Java(TM) SE Runtime Environment (build 1.8.0_191-b12)
Java HotSpot(TM) 64-Bit Server VM (build 25.191-b12, mixed mode)
```

### 建立使用者
- **注意：以下的操作在node-0和node-1兩臺機器上都要做**
- es不允許root使用者啟動應用，因此需要建立使用者：
1. 執行命令**useradd es**，即可建立使用者**es**;
2. 執行命令**passwd es**，按照提示修改使用者密碼;

### 給es使用者增加sudo許可權
- **注意：以下的操作在node-0和node-1兩臺機器上都要做**

- 給檔案/etc/sudoers增加寫許可權:

```shell
chmod a+w /etc/sudoers
```

- 開啟檔案/etc/sudoers；
- 增加以下一行內容：

```shell
es      ALL=(ALL:ALL) ALL
```

- 儲存後，修改sudoers檔案的許可權：

```shell
chmod 440 /etc/sudoers
```

### 安裝elasticsearch
- **注意：以下的操作在node-0和node-1兩臺機器上都要做**
- 在官網下載安裝包，地址是：https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.5.4.tar.gz
- 解壓後的完整目錄是**/usr/local/work/es/elasticsearch-6.5.4**，執行以下命令將資料夾的所有者和群組設定為**es**：

```shell
chown -R es:es /usr/local/work/es/elasticsearch-6.5.4
```

- 執行ls命令確認一下所屬使用者和群組：

```shell
root@node-0:/usr/local/work/es# ls -al
total 12
drwxr-xr-x 3 root root 4096 Jan 11 18:54 .
drwxr-xr-x 6 root root 4096 Jan 11 18:43 ..
drwxr-xr-x 8 es   es   4096 Dec 17 13:21 elasticsearch-6.5.4
```

### 在node-0機器安裝nodejs
- 在node-0機器安裝nodejs，詳細的操作步驟請參照文章《Ubuntu16安裝nodejs10》，其實就是下載、解壓、設定等操作，很快就能完成；

- 執行以下命令，確保es賬號能訪問nodejs目錄，是nodejs安裝的目錄：

```shell
sudo chmod 777 -R /usr/local/work/nodejs/node-v10.15.0-linux-x64
```

### 設定elasticsearch
- 開啟node-0機器的檔案，新增或者修改以下配置資訊：

引數名 |引數值 | 作用
---|---|---
cluster.name | boling_cavalry| 叢集名稱
node.name | node-0| 節點名字
network.host | 0.0.0.0| 繫結IP
http.port | 9200| 服務埠
discovery.zen.ping.unicast.hosts |  ["node-0", "node-1"]| 叢集節點主機的host
discovery.zen.minimum_master_nodes | 1| 一個節點需要看到的具有master節點資格的最小數量，<br>當前有兩臺機器，只能設定為1
http.cors.enabled | true| head外掛配置
http.cors.allow-origin | "*"| head外掛配置

- 開啟node-1機器的檔案，新增或者修改以下配置資訊：

引數名 |引數值 | 作用
---|---|---
cluster.name | boling_cavalry| 叢集名稱
node.name | node-1| 節點名字
network.host | 0.0.0.0| 繫結IP
http.port | 9200| 服務埠
discovery.zen.ping.unicast.hosts |  ["node-0", "node-1"]| 叢集節點主機的host
discovery.zen.minimum_master_nodes | 1| 一個節點需要看到的具有master節點資格的最小數量，<br>當前有兩臺機器，只能設定為1
http.cors.enabled | true| head外掛配置
http.cors.allow-origin | "*"| head外掛配置

- 兩臺機器的配置中，只有node.name這個引數的值不同，其他的一模一樣，在node-0機器上修改後的elasticsearch.yml檔案如下所示：

![在這裡插入圖片描述](https://img-blog.csdnimg.cn/20190112141143285.jpg?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2JvbGluZ19jYXZhbHJ5,size_16,color_FFFFFF,t_70)

### 啟動elasticsearch
- 如果當前使用者是root，執行命令**su - es**，切換到es使用者；
- 執行以下命令啟動node-0的elasticsearch：

```shell
/usr/local/work/es/elasticsearch-6.5.4/bin/elasticsearch
```

- 在node-1機器上執行步驟1和2，node-1的elasticsearch啟動成功後，在node-0的控制檯可以看到node-1加入叢集的資訊如下：

```shell
[2019-01-11T19:54:02,548][INFO ][o.e.c.s.MasterService    ] [node-0] zen-disco-node-join[{node-1}{bYrSztiTTzOi_SLAW_UdkA}{pC5ozVjZQF-jtHTWwyOXJA}{192.168.119.153}{192.168.119.153:9300}{ml.machine_memory=2078556160, ml.max_open_jobs=20, xpack.installed=true, ml.enabled=true}], reason: added {{node-1}{bYrSztiTTzOi_SLAW_UdkA}{pC5ozVjZQF-jtHTWwyOXJA}{192.168.119.153}{192.168.119.153:9300}{ml.machine_memory=2078556160, ml.max_open_jobs=20, xpack.installed=true, ml.enabled=true},}
[2019-01-11T19:54:03,206][INFO ][o.e.c.s.ClusterApplierService] [node-0] added {{node-1}{bYrSztiTTzOi_SLAW_UdkA}{pC5ozVjZQF-jtHTWwyOXJA}{192.168.119.153}{192.168.119.153:9300}{ml.machine_memory=2078556160, ml.max_open_jobs=20, xpack.installed=true, ml.enabled=true},}, reason: apply cluster state (from master [master {node-0}{Qc3orkESRHSTTySc2DSJyA}{p0rWBQu_TweRS3TofB4NMA}{192.168.119.152}{192.168.119.152:9300}{ml.machine_memory=2078556160, xpack.installed=true, ml.max_open_jobs=20, ml.enabled=true} committed version [15] source [zen-disco-node-join[{node-1}{bYrSztiTTzOi_SLAW_UdkA}{pC5ozVjZQF-jtHTWwyOXJA}{192.168.119.153}{192.168.119.153:9300}{ml.machine_memory=2078556160, ml.max_open_jobs=20, xpack.installed=true, ml.enabled=true}]]])
[2019-01-11T19:54:03,209][WARN ][o.e.d.z.ElectMasterService] [node-0] value for setting "discovery.zen.minimum_master_nodes" is too low. This can result in data loss! Please set it to at least a quorum of master-eligible nodes (current value: [1], total number of master-eligible nodes used for publishing in this round: [2])
```

- 在瀏覽器上訪問192.168.119.153:9300，可以返回基本資訊如下圖所示：

![在這裡插入圖片描述](https://img-blog.csdnimg.cn/20190112141208316.jpg?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2JvbGluZ19jYXZhbHJ5,size_16,color_FFFFFF,t_70)

- 至此，elasticsearch叢集搭建成功，接下來安裝head元件；

### 安裝head元件（只在node-0上安裝）

- 下載外掛，地址：https://github.com/mobz/elasticsearch-head
- 可以用git clone命令下載，也可以在網頁上下載，如下圖所示：

![在這裡插入圖片描述](https://img-blog.csdnimg.cn/20190112141222145.jpg?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2JvbGluZ19jYXZhbHJ5,size_16,color_FFFFFF,t_70)

- 下載到本地的是個名為elasticsearch-head-master的資料夾，放在目錄**/usr/local/work/es**之下；
- 確保資料夾的許可權屬於使用者es，以下命令以root賬號身份執行：

```shell
chown -R es:es /usr/local/work/es/elasticsearch-head-master
```

- 以es賬號的身份，在elasticsearch-head-master資料夾下執行命令**npm install -g grunt-cli**：

```shell
$ cd ../es/elasticsearch-head-master/
$ npm install -g grunt-cli
/usr/local/work/nodejs/node-v10.15.0-linux-x64/bin/grunt -> /usr/local/work/nodejs/node-v10.15.0-linux-x64/lib/node_modules/grunt-cli/bin/grunt
+ grunt-cli@1.3.2
added 152 packages from 122 contributors in 18.241s
```

- 上述命令安裝了grunt-cli，是用於構建的，接下來安裝head；
- 在elasticsearch-head-master資料夾下執行命令**npm install**，用於安裝head，由於網路問題有可能安裝失敗，提示資訊類似以下：

```shell
$ npm install
npm WARN deprecated coffee-script@1.10.0: CoffeeScript on NPM has moved to "coffeescript" (no hyphen)
npm WARN deprecated http2@3.3.7: Use the built-in module in node 9.0.0 or newer, instead

> phantomjs-prebuilt@2.1.16 install /usr/local/work/es/elasticsearch-head-master/node_modules/phantomjs-prebuilt
> node install.js

PhantomJS not found on PATH
Downloading https://github.com/Medium/phantomjs/releases/download/v2.1.1/phantomjs-2.1.1-linux-x86_64.tar.bz2
Saving to /tmp/phantomjs/phantomjs-2.1.1-linux-x86_64.tar.bz2
Receiving...

Error making request.
Error: connect ECONNREFUSED 52.216.82.80:443
    at TCPConnectWrap.afterConnect [as oncomplete] (net.js:1117:14)

Please report this full log at https://github.com/Medium/phantomjs
npm WARN elasticsearch-head@0.0.0 license should be a valid SPDX license expression
npm WARN optional SKIPPING OPTIONAL DEPENDENCY: fsevents@1.2.4 (node_modules/fsevents):
npm WARN notsup SKIPPING OPTIONAL DEPENDENCY: Unsupported platform for fsevents@1.2.4: wanted {"os":"darwin","arch":"any"} (current: {"os":"linux","arch":"x64"})

npm ERR! code ELIFECYCLE
npm ERR! errno 1
npm ERR! phantomjs-prebuilt@2.1.16 install: `node install.js`
npm ERR! Exit status 1
npm ERR! 
npm ERR! Failed at the phantomjs-prebuilt@2.1.16 install script.
npm ERR! This is probably not a problem with npm. There is likely additional logging output above.

npm ERR! A complete log of this run can be found in:
npm ERR!     /.npm/_logs/2019-01-12T05_41_50_161Z-debug.log
```

- 出現此問題時建議重試幾次，成功後的提示資訊如下：

```shell
$ npm install

> phantomjs-prebuilt@2.1.16 install /usr/local/work/es/elasticsearch-head-master/node_modules/phantomjs-prebuilt
> node install.js

PhantomJS not found on PATH
Downloading https://github.com/Medium/phantomjs/releases/download/v2.1.1/phantomjs-2.1.1-linux-x86_64.tar.bz2
Saving to /tmp/phantomjs/phantomjs-2.1.1-linux-x86_64.tar.bz2
Receiving...
  [=====================================---] 93%
Received 22866K total.
Extracting tar contents (via spawned process)
Removing /usr/local/work/es/elasticsearch-head-master/node_modules/phantomjs-prebuilt/lib/phantom
Copying extracted folder /tmp/phantomjs/phantomjs-2.1.1-linux-x86_64.tar.bz2-extract-1547271795685/phantomjs-2.1.1-linux-x86_64 -> /usr/local/work/es/elasticsearch-head-master/node_modules/phantomjs-prebuilt/lib/phantom
Writing location.js file
Done. Phantomjs binary available at /usr/local/work/es/elasticsearch-head-master/node_modules/phantomjs-prebuilt/lib/phantom/bin/phantomjs
npm notice created a lockfile as package-lock.json. You should commit this file.
npm WARN elasticsearch-head@0.0.0 license should be a valid SPDX license expression
npm WARN optional SKIPPING OPTIONAL DEPENDENCY: fsevents@1.2.4 (node_modules/fsevents):
npm WARN notsup SKIPPING OPTIONAL DEPENDENCY: Unsupported platform for fsevents@1.2.4: wanted {"os":"darwin","arch":"any"} (current: {"os":"linux","arch":"x64"})

added 67 packages from 69 contributors and audited 1751 packages in 16.681s
found 24 vulnerabilities (17 low, 1 moderate, 6 high)
  run `npm audit fix` to fix them, or `npm audit` for details
```

- 在elasticsearch-head-master資料夾下執行命令**grunt server**，啟動head，控制檯提示如下：

```shell
$ grunt server
Running "connect:server" (connect) task
Waiting forever...
Started connect web server on http://localhost:9100
```

- 在瀏覽器輸入地址：http://192.168.119.152:9100 ，可見如下圖資訊，在紅框中輸入http://192.168.119.153:9200 ，再點選綠框中的"連線"按鈕，即可見到elasticsharch的基本情況：

![在這裡插入圖片描述](https://img-blog.csdnimg.cn/20190112140019851.jpg?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2JvbGluZ19jYXZhbHJ5,size_16,color_FFFFFF,t_70)

### 驗證
- 這裡我用的是postman來驗證基本功能，讀者請選擇自己熟悉的http工具，或者寫程式碼來執行；
- 新建所以的操作如下圖，選擇型別為PUT，地址是：http://192.168.119.152:9200/test001
![在這裡插入圖片描述](https://img-blog.csdnimg.cn/2019011214062840.jpg?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2JvbGluZ19jYXZhbHJ5,size_16,color_FFFFFF,t_70)

- 上圖中，紅框4是elasticsearch的響應資訊，表示建立成功；
- 去head的操作頁面，點選下圖紅框中的“連線”按鈕，可見最新的索引建立情況，以及副本分佈：
![在這裡插入圖片描述](https://img-blog.csdnimg.cn/20190112140857918.jpg?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2JvbGluZ19jYXZhbHJ5,size_16,color_FFFFFF,t_70)

- 至此，Ubuntu16環境搭建elasticsearch6.5.4叢集和head外掛實戰就全部完成了，希望能在您安裝的時候提供一些參考。

### 歡迎關注ITpub：程式設計師欣宸
> [學習路上，你不孤單，欣宸原創一路相伴...](http://blog.itpub.net/70017844/)

Linux環境快速搭建elasticsearch6.5.4叢集和Head外掛

相關文章