雲進入以「應用為中心」的雲原生階段，Operator 模式的出現，為 Kubernetes 中的自動化任務建立配置與管理提供了一套行之有效的標準規範。針對大規模分散式物聯網 MQTT 訊息伺服器 EMQX 全生命期管理的自動化管理工具 [EMQX Kubernetes Operator](https://www.emqx.com/zh/emqx-kubernetes-operator)（本文中簡稱 EMQX Operator）應運而生。它作為 Kubernetes 上的自定義控制器執行，並與 Kubernetes API 伺服器(kube-apiserver)進行通訊，將高層描述轉換為正常的 Kubernetes 資源，以保持所需的應用程式狀態。

EMQX Operator 使 EMQX 的部署、調優和運維變成一種低成本、標準化、可重複性的能力，幫助使用者高效實現叢集擴容、無縫升級、故障處理和統一監控。

[![](http://img.blog.itpub.net/blog/2022/11/21/56203a0da92cd857.png?x-oss-process=style/bb)](https://www.emqx.com/zh/blog/deploying-mqtt-cluster-on-tencent-tke)

本文章將以 [EMQX 企業版](https://www.emqx.com/zh/products/emqx)為例，詳細講解如何使用 EMQX Operator 在騰訊雲 TKE 公有云平臺上建立部署 MQTT 服務叢集，並實現自動化管理與監控。

## 雲平臺簡介：騰訊雲 TKE

TKE：騰訊雲容器服務（Tencent Kubernetes Engine，TKE）基於原生 kubernetes 提供以容器為核心的、高度可擴充套件的高效能容器管理服務。騰訊雲容器服務完全相容原生 kubernetes API ，擴充套件了騰訊雲的雲硬碟、負載均衡等 kubernetes 外掛，為容器化的應用提供高效部署、資源排程、服務發現和動態伸縮等一系列完整功能，解決使用者開發、測試及運維過程的環境一致性問題，提高了大規模容器叢集管理的便捷性，幫助使用者降低成本，提高效率。

## 建立 TKE 叢集

### 建立 Kubernetes 群集

登入騰訊雲, 選擇雲產品 -> 容器服務，點選建立， 選擇標準叢集，EMQX Operator 要求 Kubernetes 版本>=1.20.0，因此我們在此選擇 Kubernetes 選擇 1.22.5 ,網路與其他資源資訊根據自身需求來制定。

### 訪問 Kubernetes 叢集

[![](http://img.blog.itpub.net/blog/2022/11/21/04978c89a754bda8.png?x-oss-process=style/bb)](https://www.emqx.com/zh/blog/deploying-mqtt-cluster-on-tencent-tke)

叢集建立完成之後，在基本資訊頁面開啟外網訪問或者內網訪問，即會生成 kubeconfig 檔案，可以使用kubectl 和 kubeconfig 檔案訪問叢集。

## LoadBalancer 配置

非直連模式下 CLB 和 Service 存在兩層 CLB，效能有一定損失，開啟 CLB 直連 pod 可以提升請求轉發效能，需要在 Service 的 annotations 裡面新增以下註解： [直連模式配置說明](https://cloud.tencent.com/document/product/457/41897)

```stylus
service.cloud.tencent.com/direct-access: "true"
```

**備註**: 開啟直連模式需要在 kube-system/tke-service-controller-config ConfigMap 中新增 GlobalRouteDirectAccess: "true" 以開啟 GlobalRoute 直連能力。

## 建立 StorageClass

點選叢集名稱進入叢集詳情頁面，點選儲存 -> StorageClass 建立需要的StorageClass, 具體步驟參考：[建立StorageClass](https://console.cloud.tencent.com/tke2/cluster/sub/create/storage/sc?rid=16&clusterId=cls-mm0it4nz)

## 使用 EMQX Operator 部署 EMQX 叢集

### 部署 cert-manager

參考 cert-manager安裝文件：[Installation](https://cert-manager.io/docs/installation/)

### 部署 EMQX Operator

```coq
kubectl apply -f "https://github.com/emqx/emqx-operator/releases/download/1.2.6/emqx-operator-controller.yaml"
```

### 部署 EMQX 企業版叢集

這裡 service type 採用 LoadBalancer

```nestedtext
cat << EOF | kubectl apply -f -
apiVersion: apps.emqx.io/v1beta3
kind: EmqxEnterprise
metadata:
  name: emqx-ee
  labels:
    "apps.emqx.io/instance": "emqx-ee"
  annotations:
    service.cloud.tencent.com/direct-access: "true" ##開啟 CLB 直連 Pod
spec:
  emqxTemplate:
    image: emqx/emqx-ee:4.4.6
    serviceTemplate:
      metadata:
        name: emqx-ee
        namespace: default
        labels:
          "apps.emqx.io/instance": "emqx-ee"
      spec:
        type: LoadBalancer
        selector:
          "apps.emqx.io/instance": "emqx-ee"
  persistent:
    accessModes: 
      - ReadWriteOnce
    resources:
        requests:
          storage: 10Gi 
    storageClassName: emqx-test
EOF
```

### 檢視叢集狀態

```livecodeserver
$ kubectl get pods  
NAME              READY   STATUS    RESTARTS   AGE  
emqx-ee-0   2/2     Running   0          22m  
emqx-ee-1   2/2     Running   0          22m  
emqx-ee-2   2/2     Running   0          22m

$ kubectl exec -it emqx-ee-0 -c emqx -- emqx_ctl status  
Node 'emqx-ee@emqx-ee-0.emqx-ee-headless.default.svc.cluster.local' 4.4.6 is started

$ kubectl exec -it emqx-ee-0 -c emqx -- emqx_ctl cluster status  
Cluster status: #{running_nodes =>
                   ['emqx-ee@emqx-ee-0.emqx-ee-headless.default.svc.cluster.local',
                    'emqx-ee@emqx-ee-1.emqx-ee-headless.default.svc.cluster.local',
                    'emqx-ee@emqx-ee-2.emqx-ee-headless.default.svc.cluster.local'],
               stopped_nodes => []}
```

EMQX Operator 和 EMQX 叢集[安裝參考](https://github.com/emqx/emqx-operator/blob/main/docs/en_US/getting-started/getting-started.md)

## 使用 LB 終結 TCP mTLS 方案

目前騰訊雲 CLB 支援 終結 TCP TLS ，如需要使用 LB 終結 TCP mTLS 請參考這篇文件：[LB 終結 TCP mTLS 方案](https://github.com/emqx/emqx-operator/discussions/312)

**備註**： 此文件詳細解釋了使用 EMQX Operator 在騰訊雲 TKE 上部署 EMQX 叢集的步驟，另外還支援配置 LB 直連 Pod，進一步提升轉發效能。

>版權宣告： 本文為 EMQ 原創，轉載請註明出處。
>
>原文連結：[https://www.emqx.com/zh/blog/deploying-mqtt-cluster-on-tencent-tke](https://www.emqx.com/zh/blog/deploying-mqtt-cluster-on-tencent-tke)

在騰訊雲 TKE 上部署 EMQX MQTT 伺服器叢集

相關文章