![頭圖.png](https://ucc.alicdn.com/pic/developer-ecology/34a668b6a34449f3b297bf1cc78f1cca.png)

曾凡維  杭州開課啦教育科技有限公司高階開發工程師
來源 | [阿里巴巴雲原生公眾號](https://mp.weixin.qq.com/s/Or5RnE6aQaqUbDcYhi-mtQ)

杭州開課啦教育科技有限公司是一家致力於為中小學生提供學習輔導的線上教育公司，目前公司後端服務基礎設施主要依託於阿里雲原生，其中包含計算、網路、儲存以及 Kubernetes 服務。

# 技術選型背景

2020 年是開課啦公司發展壯大的一年，整個公司團隊由原來的幾百人擴充至現在的幾千人，在集中使用的時候基本上會有幾千人同時在運營後臺進行操作，公司原有的內部後臺運營系統是用 PHP 搭建起來的，效能跟業務上已逐漸不能滿足公司的需求規劃，加上目前開課啦公司開發部已經做了微服務拆分，主體對外服務是 java 語言的 Dubbo 叢集，後臺系統需要無縫對接 java 的 Dubbo 服務，所以 PHP 已經逐漸不能滿足開課啦公司的需求。

當時自己也調研過 PHP 的 Dubbo 專案，由於專案已基本無人更新維護所以 pass 掉，後面自己對簡潔高效能的 go 語言感興趣，然後就關注到了 Dubbo-go 專案，經過一段時間的調研之後發現 Dubbo Go 符合我們的業務需要，並且社群非常的活躍，後面便決定選用 Dubbo-go 作為後臺的 pc 業務框架。

可能也有同學會問為什麼不使用跨言支援程度更好的 gRPC 呢，因為很多公司最開始的 RPC 服務叢集都是基於 Dubbo 生態構建的，如果換框架成本太大，所以基本不會考慮，gRPC 雖然跨語言支援程度更好但是很多東西都需要自己造輪子，比如服務註冊，服務發現，日誌監控等。

當時在決定選用 Dubbo-go 的時候開發內部也有一些反對的聲音的，為什麼不直接轉 java，轉 java 的話就沒有跨語言通訊的問題了，轉 java 的問題在於入門成本高，而且對於整個公司的技術棧來說，保持語言的多樣性，才能更加從容的應對未來的業務變化，Go 本身是一個不弱於 Java 的高效能語言，非常適合微服務架構。

# 面臨的挑戰

確定了框架選型後，我接到的首要任務便是要搭建出一套可快速建立業務專案的腳手架，開發出基於 HTTP 協議的 RPC 代理服務，部署需要接入公司的容器化部署平臺，一切都是從零開始，在網上基本上找不到可以借鑑的資料。

首先是要進行 Dubbo-go 專案的架構的規劃，確定專案目錄結構，經過參考 Dubbo-go Demo 以及其它的 Go 專案最終確定了專案的目錄結構，以下目錄結構可作為參考。

![1.png](https://ucc.alicdn.com/pic/developer-ecology/340a00368b8a4764ae033c0b6bb9972d.png)

為了與 Java 服務註冊中心保持一致，Dubbo-go 在專案選型上選用如下元件：

- 使用 zookeeper 作為註冊中心
- nacos 作為配置中心
- 資料庫 orm 採用 gorm
- 訊息佇列使用 RocketMQ

為了增加開發的效率我們在 provider 服務初始化前可以對配置進行精簡只保留最基礎的配置就可以類似下面這種，provider 服務的編碼參考 Dubbo-go demo 就可以了。

![2.png](https://ucc.alicdn.com/pic/developer-ecology/62d14207ee9e4bd9b5ff2238d21cd9d3.png)

下面是服務啟動的 main 方法程式碼：

![3.png](https://ucc.alicdn.com/pic/developer-ecology/93b36ee3d9c94166b0c6324653567fad.png)

# Dubbo-go RPC 服務閘道器設計

一般使用 Dubbo，provider 端需要暴露出介面和方法，consumer 端要十分明確服務使用的介面定義和方法定義，還有入參返參型別等等資訊，還需要基於 provider 端提供的 API，兩端才能正常通訊呼叫。

然而閘道器的使用場景是並不關心要呼叫的介面的詳細定義，閘道器只關注要呼叫的方法、傳遞的引數、能接收返回結果就可以了，實現閘道器代理的基礎是 Dubbo/Dubbo-go 的泛化呼叫特性。

下面是 Dubbo-go 官方給的 demo，泛化服務載入後需要等待 3 秒才能完成呼叫，然而在實際使用的時候肯定是不能實時載入服務去等待 3 秒，所以在閘道器應用啟動時就需要載入快取好需要泛化調的服務。

![4.png](https://ucc.alicdn.com/pic/developer-ecology/a34afb706c0e400aaf1e4141851bef9b.png)

經過對 Dubbo-go 泛化呼叫 demo 的研究，發現用該特性設計 dubbo-go 閘道器是可行的，難點在於我們需要把每一個需要閘道器代理 RPC 服務方法的引數以及服務的路徑等配置獲取到並快取起來，這樣才能在呼叫前初始化好泛化呼叫服務，一個服務的配置如下。

![5.png](https://ucc.alicdn.com/pic/developer-ecology/237afd6ab00548a9b608b142f19ac910.png)

由於是用 go 語言做的閘道器代理，所以不能透過 Java 的 jar 包來獲取到 Java RPC 服務配置，如果透過人工維護的話工作量太大，而且易出錯，顯然是不可接受的。經過一段時間的瞭解，Java 服務可以透過註解來實現配置的獲取，Java 端在方法上加上註解後啟動服務的時候會將配置資訊透過訊息傳送到 MQ，閘道器消費這些訊息來實現獲取 Java RPC 服務的配置。

Dubbo Go 的 RPC 服務由於 go 語言不支援註解，所以我經過思考自己寫了一個掃描程式碼的小工具，在每個 RPC 服務方法前加上對應的註釋，透過對註釋的掃描來獲取 RPC 服務的配置，獲取到配置後在專案目錄內生成 RPC 服務配置，啟動應用的時候讀取配置傳送到 MQ。

閘道器代理實現之後還可以在閘道器的基礎實現更多的功能，比如 token 驗證、白名單、限流、熔斷、日誌監控功能，閘道器代理請求實現效果如下：

![6.png](https://ucc.alicdn.com/pic/developer-ecology/0a5d5b89c62c4d5c807f9d99bbbaa047.png)

# 容器化部署

公司內部的容器化部署環境為阿里雲的 K8s，部署至 K8s 平臺只需要提供映象檔案，由於 Dubbo-go 編譯後是一個二進位制的檔案，不需任何額外的第三方庫，能在 Docker 環境下穩定執行。有 docker 映象檔案如下圖所示，可以用 centos 等任一 linux 發行版作為 base 映象。

```
LABEL maintainer="<xxx>"
LABEL version="1.0"
LABEL description="KKL-GO-NKO-BASE"`

ARG envType=stable
#設定環境變數
ENV envType ${envType}
#編譯打包好的壓縮包
ADD ./target/nko-base-${envType}.tar.gz /app/

WORKDIR /app
EXPOSE 20000
```

映象寫好後提供給釋出平臺，釋出平臺機器啟動映象並解壓打包檔案，執行 Dubbo-Go 程式 。

```
Container entrypoint set to [bash, -c, tar -zxf nko-base-stable.tar.gz && SERVER_ENV=kubernetes && sh ./nko-base/bin/load.sh start -group=stable]
```

由於開發測試到生產一般是有多個部署環境的，所以我們需要改動的[dubbo-go samples demo](https://mp.weixin.qq.com/s?__biz=MzUzNzYxNjAzMg==&mid=2247502085&idx=1&sn=dbfd6404b3e070f76cd2752a54422e48&chksm=fae6c2cacd914bdc3c7e8c611d335907b80a894112ac9888a5ffe09cf5a2099bdb0a0777b88d&token=351771418&lang=zh_CN) 裡的編譯指令碼，讓其支援多環境打包。

另外，Dubbo-go 預設註冊的 IP 是 K8s pod 的虛擬 IP，不同 K8s 叢集之間網路是不能互通的，所以如果需要跨叢集呼叫就需要修改預設註冊 IP，將預設註冊的 pod IP + 埠 修改為 Kubernetes 實體機的 IP 加對應埠，Kubernetes 會在 pod 內寫入實體機的 IP 加對應埠環境變數，應用程式可以透過讀取環境變數獲取實體機的 IP加埠，如果需要實現此功能需要修改 Dubbo-go 的註冊邏輯。例如以 zookeeper 註冊中心為例，我們可以透過擴充套件 registery/zookeeper/registry.go的 registerTempZookeeperNode 方法來實現修改註冊 IP 跟埠，程式碼如下圖，Dubbo-go 官方將在後面的版本以配置的形式支援自定義註冊 IP 跟埠的功能。

```
func (r *zkRegistry) registerTempZookeeperNode(root string, node string) error {
  ...
  regIp = os.Getenv(constant2.RegistryEnvIP) //實體機的ip
  regPort = os.Getenv(constant2.RegistryEnvPort) //實體機的埠
  urlNode, _ := common.NewURL(node)
  role, _ := strconv.Atoi(urlNode.GetParam(constant.ROLE_KEY, ""))
  if role == common.PROVIDER && regIp != "" && regPort != "" {
    urlNode.Ip = regIp
    urlNode.Port = regPort
    node = url.QueryEscape(urlNode.String())
  }

zkPath, err = r.client.RegisterTemp(root, node)
  ...
}
```

# 最後的話

如果使用 dubbo-go 過程中遇到一些問題，可以提交 issue 或者進社群釘釘群進行溝通交流。

個人建議：如果你做好了入坑 Dubbo-go 的準備，最好自己解決這些問題並給官方反饋 PR，遇到問題解決問題你才能成長並有所收穫，不是嗎？

歡迎對 apache/dubbo-go 專案有興趣的同學透過搜尋釘釘群號 31363295 加入交流群。

### **作者簡介**

曾凡維（github @jack15083), 一個有 9 年服務端業務開發經驗的一執行緒序員，曾在騰訊閱文等多家公司擔任後端開發工程師，目前就職杭州開課啦教育科技有限公司，從事 go 語言服務基礎架構和中介軟體及部分業務開發工作。</xxx>

開課啦 dubbo-go 微服務升級實戰

相關文章