下一代的微服務架構基礎是ServiceMesh?
作者 | 楊波
寫在前面
今年,ServiceMesh(服務網格) 概念在社群裡頭非常火,有人提出 2018 年是 ServiceMesh 年,還有人提出 ServiceMesh 是下一代的微服務架構基礎。作為架構師,如果你現在還不瞭解 ServiceMesh 的話,是否感覺有點落伍了?
那麼到底什麼是 ServiceMesh?它的誕生是為了解決什麼問題?企業是否適合引入 ServiceMesh?通過這篇文章,將為你一一解答這些問題。
微服務架構的核心技術問題
在業務規模化和研發效能提升等因素的驅動下,從單塊應用向微服務架構的轉型 (如下圖所示),已經成為很多企業 (尤其是網際網路企業) 數字化轉型的趨勢。
在微服務模式下,企業內部服務少則幾個到幾十個,多則上百個,每個服務一般都以叢集方式部署,這時自然產生兩個問題 (如下圖所示):
一、服務發現: 服務的消費方 (Consumer) 如何發現服務的提供方 (Provider)?
二、負載均衡: 服務的消費方如何以某種負載均衡策略訪問叢集中的服務提供方例項?
作為架構師,如果你理解了這兩個問題,也就理解了微服務架構在技術上最核心問題。
三種服務發現模式
服務發現和負載均衡並不是新問題,業界其實已經探索和總結出一些常用的模式,這些模式的核心其實是代理 (Proxy,如下圖所以),以及代理在架構中所處的位置。
在服務消費方和服務提供方之間增加一層代理,由代理負責服務發現和負載均衡功能,消費方通過代理間接訪問目標服務。根據代理在架構上所處的位置不同,當前業界主要有三種不同的服務發現模式:
模式一:傳統集中式代理
這是最簡單和傳統做法,在服務消費者和生產者之間,代理作為獨立一層集中部署,由獨立團隊 (一般是運維或框架) 負責治理和運維。常用的集中式代理有硬體負載均衡器 (如 F5),或者軟體負載均衡器 (如 Nginx),F5(4 層負載)+Nginx(7 層負載) 這種軟硬結合兩層代理也是業內常見做法,兼顧配置的靈活性 (Nginx 比 F5 易於配置)。
這種方式通常在 DNS 域名伺服器的配合下實現服務發現,服務註冊 (建立服務域名和 IP 地址之間的對映關係) 一般由運維人員在代理上手工配置,服務消費方僅依賴服務域名,這個域名指向代理,由代理解析目標地址並做負載均衡和呼叫。
國外知名電商網站 eBay,雖然體量巨大,但其內部的服務發現機制仍然是基於這種傳統的集中代理模式,國內公司如攜程,也是採用這種模式。
模式二:客戶端嵌入式代理
這是很多網際網路公司比較流行的一種做法,代理 (包括服務發現和負載均衡邏輯) 以客戶庫的形式嵌入在應用程式中。這種模式一般需要獨立的服務註冊中心元件配合,服務啟動時自動註冊到註冊中心並定期報心跳,客戶端代理則發現服務並做負載均衡。
Netflix 開源的 Eureka(註冊中心)[附錄 1] 和 Ribbon(客戶端代理)[附錄 2] 是這種模式的典型案例,國內阿里開源的 Dubbo 也是採用這種模式。
模式三:主機獨立程式代理
這種做法是上面兩種模式的一個折中,代理既不是獨立集中部署,也不嵌入在客戶應用程式中,而是作為獨立程式部署在每一個主機上,一個主機上的多個消費者應用可以共用這個代理,實現服務發現和負載均衡,如下圖所示。這個模式一般也需要獨立的服務註冊中心元件配合,作用同模式二。
Airbnb 的 SmartStack[附錄 3] 是這種模式早期實踐產品,國內公司唯品會對這種模式也有探索和實踐。
三種服務發現模式的比較
上面介紹的三種服務發現模式各有優劣,沒有絕對的好壞,可以認為是三種不同的架構風格,在不同的公司都有成功實踐。下表總結三種服務發現模式的優劣比較,業界案例和適用場景建議,供架構師選型參考:
服務網格 ServiceMesh
所謂的 ServiceMesh,其實本質上就是上面提到的模式三:主機獨立程式模式,這個模式其實並不新鮮,業界 (國外的 Airbnb 和國內的唯品會等) 早有實踐,那麼為什麼現在這個概念又流行起來了呢?我認為主要原因如下:
- 上述模式一和二有一些固有缺陷,模式一相對比較重,有單點問題和效能問題;模式二則有客戶端複雜,支援多語言困難,無法集中治理的問題。模式三是模式一和二的折中,彌補了兩者的不足,它是純分散式的,沒有單點問題,效能也不錯,應用語言棧無關,可以集中治理。
- 微服務化、多語言和容器化發展的趨勢,企業迫切需要一種輕量級的服務發現機制,ServiceMesh 正是迎合這種趨勢誕生,當然這還和一些大廠 (如 Google/IBM 等) 的背後推動有關。
模式三 (ServiceMesh) 也被形象稱為邊車 (Sidecar) 模式,如下圖,早期有一些摩托車,除了主駕駛位,還帶一個邊車位,可以額外坐一個人。在模式三中,業務程式碼程式 (相當於主駕駛) 共享一個代理 (相當於邊車),代理除了負責服務發現和負載均衡,還負責動態路由、容錯限流、監控度量和安全日誌等功能,這些功能是具體業務無關的,屬於跨橫切面關注點 (Cross-Cutting Concerns) 範疇。
在新一代的 ServiceMesh 架構中 (下圖上方),服務的消費方和提供方主機 (或者容器) 兩邊都會部署代理 SideCar。ServiceMesh 比較正式的術語也叫資料平面 (DataPlane),與資料平面對應的還有一個獨立部署的控制平面 (ControlPlane),用來集中配置和管理資料平面,也可以對接各種服務發現機制 (如 K8S 服務發現)。術語資料平面和控制平面,估計是偏網路 SDN 背景的人提出來的。
上圖左下角,每個主機上同時居住了業務邏輯程式碼 (綠色表示) 和代理 (藍色表示),服務之間通過代理發現和呼叫目標服務,形成服務之間的一種網路狀依賴關係,控制平面則可以配置這種依賴呼叫關係,也可以調撥路由流量。如果我們把主機和業務邏輯剝離,就出現一種網格狀架構 (上圖右下角),服務網格由此得名。
Istio[附錄 4] 是 Google/IBM 等大廠支援和推進的一個 ServiceMesh 標準化工作組,上圖是 Istio 給出的 ServiceMesh 參考架構 (注意這個是老版架構,新版有一些調整,但是大框架沒變)。Istio 專注在控制平面的架構、功能、以及控制平面和資料平面之間 API 的標準化,它的控制平面功能主要包括:
- Istio-Manager:負責服務發現,路由分流,熔斷限流等配置資料的管理和下發
- Mixer:負責收集代理上採集的度量資料,進行集中監控
- Istio-Auth:負責安全控制資料的管理和下發
Envoy[附錄 5] 是目前 Istio 主力支援的資料平面代理,其它主流代理如 nginx/kong 等也正在陸續加入這個陣營。kubernetes 是目前 Isito 主力支援的容器雲環境。
我的建議
目前我本人並不特別看好 ServiceMesh,也不是特別建議企業在生產上試水 ServiceMesh,主要原因如下:
- 本質上,ServiceMesh 其實並不是新東西,它只是模式三主機獨立程式模式,這個模式早就有公司在探索和實踐了,但是並未流行起來,可見這個模式也是存在落地挑戰的。
- 表面上看,模式三既是模式一和模式二的折中,也解決了模式一和模式二存在的問題。
- 但是在每個主機上獨立部署一個代理程式,是有很大運維管理開銷的,一方面是規模化部署的問題 (考慮服務很多,機器也很多的場景);另一方面是如何監控治理的問題,代理掛了怎麼辦?你的團隊是否具備自動化運維和監控的能力?另外開發人員在服務除錯的時候,會依賴於這個獨立的代理,除錯排錯比較麻煩,這個問題怎麼解決?
- Istio 的確做了一些標準化工作,但是沒有什麼特別的創新,可是說換湯不換藥,就是把模式三規範化和包裝了一下。透過現象看本質,Google/IBM 等行業大廠在背後推 Isito/ServiceMesh,背後有一些市場利益訴求考慮,例如 Google 要推進它的 kubernates 和公有云生態。
- ServiceMesh 在年初聲音比較大,最近漸漸安靜下來,我聽到國內只有一些大廠 (華為,新浪微博,螞蟻金服等) 在試水,實際生產級落地的案例聊聊無幾。大多數企業對 ServiceMesh 只是觀望,很多架構師對 ServiceMesh 實際落地都存在疑慮。
所以我的個人建議,對於大部分企業 (一般運維和研發能力不是特別強),採用模式一集中代理模式就足夠了。這個模式比較傳統不新鮮,但是在很多一線企業已經切實落地,我甚至認為,除了一些大廠,大部分中小企業的服務發現架構採用的就是集中代理。我本人經歷過三家網際網路公司,大的有 eBay,中等有攜程,小的有拍拍貸,都是採用集中式代理模式,而且玩得都很好。我的架構理念很簡單,對於生產級應用,不追新,老實採用大部分企業落地過的方案。
模式一的最大好處是集中治理,應用不侵入,語言棧無關,另外因為模式一是集中部署的,不像模式三是分散式部署,所以模式一的運維開銷也遠小於模式三。對於模式一,大家最大的顧慮是效能和單點問題,其實效能還是 OK 的,如果架構和容量規劃合理的話,實際生產中經過集中代理的效能開銷一般可以控制在小於 10 個 ms,eBay 和攜程等大流量企業的成功實踐已經驗證了這點。單點問題一般建議採用兩層負載結構,例如硬體 F5+ 軟體 nginx 兩層負載,F5 以主從 HA 部署,nginx 則以叢集多例項部署,這種架構兼顧了高可用和配置的靈活性。
另外,模式一還可以和服務註冊中心結合,從而降低手工配置的複雜性,實現 DevOps 研發自助部署,一種方案如下圖所示:
服務啟動時自動註冊到服務註冊中心並定期報心跳,Proxy 則定期到服務註冊中心同步例項。這種方式下,不需要為每個服務申請一個域名,只需一個泛域名即可,消費者訪問服務時採用服務名 + 泛域名即可,整個服務上線流程可以做到 DevOps 研發自助。目前社群流行的一些開源代理如 traefik[附錄 7] 和 kong[附錄 8] 等都支援和多種服務註冊中心 (Consul/Eureka/Etcd/Zookeeper 等) 進行整合。目前這種方案在拍拍貸有初步成功實踐,採用 kong[附錄 7] 和自研服務註冊中心 Radar[附錄 8],同時和容器雲排程平臺配合,實現了研發全自助式釋出上線。
結 論
1、服務註冊發現和負載均衡是微服務架構在技術上的根本問題,解決的辦法是採用代理 Proxy。根據代理在架構上的位置不同,服務發現代理一般有三種模式:
- 模式一:集中式代理
- 模式二:客戶端嵌入式代理
- 模式三:主機獨立程式代理
這三種模式沒有絕對的好壞之分,只是三種不同的架構風格,各有優劣和適用場景,在不同企業都有成功落地案例。
2、ServiceMesh 本質上就是模式三中主機獨立程式代理,它結合了模式一和模式二的優勢,但是分散式部署運維管理開銷大。Istio 對 ServiceMesh 的架構、功能和 API 進行了標準化。
3、ServiceMesh 還在演進中,生產落地仍有挑戰,一般企業不建議生產級使用。集中式代理最成熟,對於一般中小企業,建議從集中式代理開始,等達到一定規模和具備一定的研發運維能力,再根據需要考慮其它服務發現模式。
4、架構師不要盲目追新,在理解微服務架構原理的基礎上,可以學習和試點新技術,但是對於生產級應用,應該以成熟穩定,有大規模落地案例作為選型第一準則。
相關文章
- [雲原生微服務架構](十)微服務架構的基礎知識微服務架構
- SOA/ESB架構升級之路:從微服務到ServiceMesh,再到Sermant架構微服務
- 微服務架構基礎(第一章)微服務架構
- 微服務架構基礎之API閘道器微服務架構API
- 微服務架構基礎之輕量級部署微服務架構
- 微服務架構(一):什麼是微服務微服務架構
- 微服務架構設計基礎之立方體模型微服務架構模型
- 微服務架構 spring boot 那些最基礎的知識點微服務架構Spring Boot
- (十七)spring cloud微服務分散式雲架構-eureka 基礎SpringCloud微服務分散式架構
- SOA架構和微服務架構的區別是什麼?架構微服務
- 基於SpringCloud的微服務架構設計SpringGCCloud微服務架構
- 架構師成長之路也該瞭解的新一代微服務技術-ServiceMesh(上)架構微服務
- 微服務2:微服務全景架構微服務架構
- 微服務架構設計基礎之領域驅動設計微服務架構
- 微服務業務架構的探索微服務架構
- 教你玩轉微服務--基於DDD的微服務架構落地實踐之路微服務架構
- 微服務架構:構建PHP微服務生態微服務架構PHP
- 微服務架構初探微服務架構
- 微服務 dubbospring 架構微服務Spring架構
- 微服務基礎微服務
- MySQL基礎架構和事務MySql架構
- SOA架構和微服務架構的區別架構微服務
- 基於Redis構建微服務的反應式架構 - bitsrcRedis微服務架構
- 下一代ETL工具:微服務架構的全新資料整合平臺微服務架構
- 單體架構&微服務架構&中臺服務架構架構微服務
- 架構之:微服務架構漫談架構微服務
- 架構演進之「微服務架構」架構微服務
- 分散式架構和微服務架構的區別分散式架構微服務
- 微服務架構 | 4.2 基於 Feign 與 OpenFeign 的服務介面呼叫微服務架構
- 微服務架構 | 5.2 基於 Sentinel 的服務限流及熔斷微服務架構
- 三、java版 SpringCloud分散式微服務雲架構之Java 基礎語法JavaSpringGCCloud分散式微服務架構
- 基於 Hyperf 的 RPC 簡單微服務架構試探RPC微服務架構
- 聊聊微服務架構思想微服務架構
- 微服務與架構師微服務架構
- 微服務核心架構梳理微服務架構
- 微服務架構初識微服務架構
- 微服務架構詳談微服務架構
- 軟體架構模式之微服務架構架構模式微服務