雲進入以「應用為中心」的雲原生階段，Operator 模式的出現，則為 Kubernetes 中的自動化任務建立配置與管理提供了一套行之有效的標準規範。透過將運維知識固化成高階語言 Go/Java 程式碼，使得運維知識可以像普通軟體一樣交付，並能支援高可靠、具備高階運維能力的有狀態應用批次交付。

針對大規模分散式物聯網 MQTT 訊息伺服器 EMQX 全生命期管理的自動化管理工具 EMQX Kubernetes Operator（本文中簡稱 EMQX Operator）應運而生。它作為 Kubernetes 上的自定義控制器執行，並與 Kubernetes API 伺服器（kube-apiserver）進行通訊，將高層描述轉換為正常的 Kubernetes 資源，以保持所需的應用程式狀態。

EMQX Operator 使 EMQX 的部署、調優和運維變成一種低成本、標準化、可重複性的能力，幫助使用者高效實現叢集擴容、無縫升級、故障處理和統一監控。
[![叢集](http://img.blog.itpub.net/blog/2022/09/29/f63624bd060b1ab1.png?x-oss-process=style/bb)](https://www.emqx.com/zh/blog/category/emqx)

本文章將以 [EMQX 企業版](https://www.emqx.com/zh/products/emqx)為例，詳細講解如何使用 [EMQX Operator](https://www.emqx.com/zh/emqx-kubernetes-operator) 在華為雲 CCE 公有云平臺上建立部署 MQTT 服務叢集，並實現自動化管理與監控。

## 雲平臺簡介：華為雲 CCE

雲容器引擎（Cloud Container Engine，簡稱CCE）提供高度可擴充套件的、高效能的企業級 Kubernetes 叢集，支援執行 Docker 容器。藉助雲容器引擎，您可以在華為雲上輕鬆部署、管理和擴充套件容器化應用程式，詳見：[成長地圖_雲容器引擎 CCE_華為雲](https://support.huaweicloud.com/cce/index.html)

## 建立 CCE 叢集

### 購買 CCE 叢集

登入華為雲 CCE控制檯，購買“Turbo 叢集”或者“CCE 叢集”，EMQX Operator 要求Kubernetes 版本>=1.20.0 ，因此我們在此選擇 Kubernetes 1.21，網路與其他資源資訊根據自身需求來制定。
[![](http://img.blog.itpub.net/blog/2022/09/29/68929d18a34937a8.png?x-oss-process=style/bb)](https://www.emqx.com/zh/blog/category/emqx)

### 建立節點池（直接新增節點也可以）
[![](http://img.blog.itpub.net/blog/2022/09/29/235019895af20202.png?x-oss-process=style/bb)](https://www.emqx.com/zh/blog/category/emqx)

這裡新增的節點必須可以訪問外網（可以透過加 NAT 閘道器解決）

節點安裝的作業系統建議是 Ubuntu，否則有可能會缺少必要的庫（socat）
[![](http://img.blog.itpub.net/blog/2022/09/29/21d126c3134f50e2.png?x-oss-process=style/bb)](https://www.emqx.com/zh/blog/category/emqx)

## 訪問 Kubernetes 叢集

點選 Cloud Shell
[![](http://img.blog.itpub.net/blog/2022/09/29/a629540b5aca1723.png?x-oss-process=style/bb)](https://www.emqx.com/zh/blog/category/emqx)

詳情參考：[透過 kubectl 連線叢集_雲容器引擎 CCE_使用者指南_叢集管理_舊版UI_訪問叢集_華為雲](https://support.huaweicloud.com/usermanual-cce/cce_01_0107.html)

## StorageClass 配置

檢視當前的 StroageClass

```routeros
kubectl get sc
```
[![](http://img.blog.itpub.net/blog/2022/09/29/ab6a161f3349c90f.png?x-oss-process=style/bb)](https://www.emqx.com/zh/blog/category/emqx)

這裡我們用 csi-disk。

## 使用 EMQX Operator 部署 EMQX 叢集

### 部署 cert-manager

參考 cert-manager 安裝文件：https://cert-manager.io/docs/installation/

### 部署 EMQX Operator

```coq
kubectl apply -f "https://github.com/emqx/emqx-operator/releases/download/1.2.6/emqx-operator-controller.yaml"
```

### 部署 EMQX 企業版叢集

這裡 service type 採用 `LoadBalancer`

```nestedtext
cat << "EOF" | kubectl apply -f -
apiVersion: apps.emqx.io/v1beta3
kind: EmqxEnterprise
metadata:
  name: emqx-ee
  labels:
    "foo": "bar"
spec:
  persistent:
    storageClassName: csi-disk
    resources:
      requests:
        storage: 1Gi
    accessModes:
    - ReadWriteOnce
  emqxTemplate:
    image: emqx/emqx-ee:4.4.6
    serviceTemplate:
      metadata:
        annotations:
          kubernetes.io/elb.pass-through: "true"
          kubernetes.io/elb.class: union
          kubernetes.io/elb.autocreate:
              '{
                "type": "public",
                "name": "emqx",
                "bandwidth_name": "cce-emqx",
                "bandwidth_chargemode": "bandwidth",
                "bandwidth_size": 5,
                "bandwidth_sharetype": "PER",
                "eip_type": "5_bgp"
              }'
      spec:
        type: LoadBalancer
EOF
```

**Load Balancer引數說明**

- bandwidth_chargemode

> 頻寬付費模式。 bandwidth：按頻寬計費 traffic：按流量計費 預設型別：bandwidth

- bandwidth_size

> 頻寬大小，預設 1Mbit/s~2000Mbit/s，請根據 Region 頻寬支援範圍設定。

- bandwidth_sharetype

> 頻寬共享方式。 PER：獨享頻寬

- eip_type

> 彈性公網IP型別 5_telcom：電信 5_union：聯通 5_bgp：全動態BGP 5_sbgp：靜態BGP

### 檢視叢集狀態

```livecodeserver
$ kubectl get pods  
NAME              READY   STATUS    RESTARTS   AGE  
emqx-ee-0   2/2     Running   0          22m  
emqx-ee-1   2/2     Running   0          22m  
emqx-ee-2   2/2     Running   0          22m

$ kubectl exec -it emqx-ee-0 -c emqx -- emqx_ctl status  
Node 'emqx-ee@emqx-ee-0.emqx-ee-headless.default.svc.cluster.local' 4.4.7 is started

$ kubectl exec -it emqx-ee-0 -c emqx -- emqx_ctl cluster status  
Cluster status: #{running_nodes =>
                   ['emqx-ee@emqx-ee-0.emqx-ee-headless.default.svc.cluster.local',
                    'emqx-ee@emqx-ee-1.emqx-ee-headless.default.svc.cluster.local',
                    'emqx-ee@emqx-ee-2.emqx-ee-headless.default.svc.cluster.local'],
               stopped_nodes => []}
```

EMQX Operator 和 EMQX 叢集安裝參考: https://github.com/emqx/emqx-operator/blob/main/docs/en_US/getting-started/getting-started.md

## 關於 LoadBalancer 終結 TLS

由於華為 ELB 不支援 TCP 證照，所以請參考這篇文件解決 TCP 證照終結問題：https://github.com/emqx/emqx-operator/discussions/312

## 結語

至此，我們完成了在華為雲 CCE 上部署 EMQX 叢集的全部流程。EMQX Operator 可以幫助使用者在 Kubernetes 環境上快速建立和管理 EMQX 叢集，不僅極大簡化部署和管理流程，也降低了管理和配置的專業技能要求，是使用者快速體驗雲原生的最佳選擇。

>版權宣告： 本文為 EMQ 原創，轉載請註明出處。
>
>原文連結：[https://www.emqx.com/zh/blog/category/emqx](https://www.emqx.com/zh/blog/category/emqx)

在華為雲 CCE 上部署 EMQX MQTT 伺服器叢集

相關文章