uber/cadence:Cadence是一種分散式,可擴充套件,持久且高度可用的流程編排引擎
定位類似zeebe、activiti之類工作流引擎,高階別的區別在於zeebe是基於BPMN的,Cadence支援使用Java或Go等普通程式語言編寫編排程式碼。大多數複雜程式都不是使用視覺化程式設計編寫的。它只是不適用於複雜的用例。學習Cadence程式設計也更簡單,因為您只需要學習一些編寫Java(或其他)程式碼的規則。BPMN更具限制性和複雜性。
系統架構方式存在很多技術差異。Cadence依賴於分割槽資料庫。目前支援MySQL和Cassandra,未來還會有更多支援。Zeebe使用 EventSourcing,寫入吞吐量更大。
Cadence文件很晦澀難懂,這也是Uber大裁員的一個原因吧,不使用業內通用模式和架構,自己建立一套,但是需要首先說明自己這套相比通用的有什麼缺點和優點,直接上來闡述功能,怪不得被人比喻成類似奧斯卡頒獎禮儀。
它的大概原理是:
業務邏輯被建模為“工作流workflow”和“活動activities”。“工作流workflow”是業務協調邏輯的實現,其唯一目的是協調“活動activities”執行。“活動activities”是用於實現業務邏輯的任務。
“工作流workflow”和“活動activities”的實現是在工作程式中託管和執行。這些工作者長期輪詢Cadence伺服器以執行任務,透過呼叫“工作流workflow”和“活動activities”實現來執行任務,並將任務結果返回給Cadence伺服器。此外,工作人員可以實現為完全無狀態的服務,這反過來允許無限制的水平擴充套件。
有的企業已經開始應用Cadence了,他們的體驗如下:
我們已經將Cadence投入生產近一年了。我們將其用於雲提供商的基礎架構配置。
第一個POC在兩週內準備就緒,再過兩個星期我們將其推向生產階段。最初的學習曲線相當高,因為Cadence的構建工作流程起初並不一定容易(當時我們開始時沒有太多的文件),但之後它更容易。
相關部落格:https://banzaicloud.com/tags/cadence/
市場上有各種不同的任務佇列(我不是在開玩笑,你可以自己在taskqueues.com上檢視它們),那麼是什麼讓Cadence出類拔萃呢?是什麼讓它成為一個複雜的分散式任務佇列管理器?首先,您可以在程式碼中定義工作流程,讓Cadence處理狀態,超時,歷史記錄和所有其他必需品。然後,可以在提交後檢查這些工作流程,以便您可以檢查其進度和結果,或根據需要向其傳送外部訊號。
Matching Service是負責分派任務,保證了at-most-once語義,這意味著工作流的每個活動要麼只執行一次,要麼(在失敗的情況下)根本不執行。
History Service是神奇魔力所在。它管理佇列,處理事件,儲存和改變工作流狀態。
您必須編寫的程式碼:
- 定義”工作流workflow”並執行“活動activities”的實際任務的工作者worker,
- 用於提交工作流程執行請求的程式碼,以及
- 可選擇檢查”工作流workflow”進度或結果。
與Activities工作流程的可重用構建塊(保證最多執行一次)不同,”工作流workflow”程式碼會重複執行多次。雖然您可以自由地按照自己喜歡的方式組織工作流程式碼,並且可以安全地使用Go的控制結構和純函式(即沒有副作用的那些),但必須確保您的”工作流workflow”具有確定性。要實現這一點,您應該使用Cadence提供的特殊功能,而不是具有副作用的構造或依賴於某些外部狀態的構造,如資料庫,熵源或掛鐘時間。我們更喜歡將大多數變數重新定位為工作流引數,而不是在執行期間查詢它們。
不要忘記,對於“活動activities”沒有這些的限制,可以在執行較長時間的程式中使用適當的Go構造。當然,您不應洩漏資源或在程式碼中啟動無人參與的Go例程。另一方面,您必須在自己的工作流程式碼中處理失敗和重新執行活動,這在冪等活動中通常更容易。
在Cadence”工作流workflow”中執行“活動activities”
// Synchronous activity execution workflow.ExecuteActivity(ctx, sendEmailActivity).Get(ctx, &result) // Asynchronous activity execution future := workflow.ExecuteActivity(ctx, sendEmailActivity) |
執行Go例程
// Cadence workflow.Go(ctx, func(ctx workflow.Context) {/* … */}) // Plain Go go func(ctx context.Context) {/* … */}(ctx) |
建立channel,傳送和接收資料
// Cadence channel := workflow.NewChannel(ctx) channel.Send(ctx, true) channel.Receive(ctx, &result) // Plain Go channel := make(chan interface{}) channel <- true result := <-channel |
建立可取消的上下文:
// Cadence childCtx, cancelHandler := workflow.WithCancel(ctx) // Plain Go childCtx, cancelHandler := context.WithCancel(ctx) |
計時器:
// Cadence workflow.NewTimer(childCtx, processingTimeThreshold) // Plain Go timer.NewTimer(processingTimeThreshold) |
sleep:
// Cadence workflow.Sleep(sleepTime) // Plain Go time.Sleep(sleepTime) |
等待完成一項行動:
// Cadence selector := workflow.NewSelector(ctx) selector.AddFuture(future, handle) selector.Select(ctx) // Plain Go select { case <-ready: handle() case <-ctx.Done(): } |
在K8s上可以安裝Cadence,見部落格文件,點選標題進入原文
相關文章
- Cadence:馴服複雜流程的工作流引擎
- DDD福音:Zeebe是一個類似Kafka的可擴充套件的分散式事件溯源工作流引擎Kafka套件分散式事件
- Airbyte如何使用Temporal擴充套件工作流程編排?AI套件
- 如何使用Zebee構建高度可擴充套件的分散式工作流中介軟體?套件分散式
- 【譯】12個編寫乾淨且可擴充套件的JavaScript技巧套件JavaScript
- kestra: 無限可擴充套件的開源編排和排程平臺套件
- 編寫可擴充套件程式套件
- 讀構建可擴充套件分散式系統:方法與實踐15可擴充套件系統的基本要素套件分散式
- 紅帽通過一致且持久的儲存擴充套件Kubernetes平臺套件
- 讀構建可擴充套件分散式系統:方法與實踐09可擴充套件資料庫基礎套件分散式資料庫
- dubbo是如何實現可擴充套件的?套件
- KServe:一個健壯且可擴充套件的雲原生模型伺服器套件模型伺服器
- kotlin 擴充套件(擴充套件函式和擴充套件屬性)Kotlin套件函式
- 可擴充套件性套件
- 高度可擴充套件,EMQX 5.0 達成 1 億 MQTT 連線套件MQQT
- dubbo是如何實現可擴充套件的?(二)套件
- 如何在高度可擴充套件的系統中管理後設資料套件
- 【Kotlin】擴充套件屬性、擴充套件函式Kotlin套件函式
- 基於Apache Spark以BigDL搭建可擴充套件的分散式深度學習框架ApacheSpark套件分散式深度學習框架
- 讀構建可擴充套件分散式系統:方法與實踐05分散式快取套件分散式快取
- 擴充套件表示式套件
- MinIO分散式叢集的擴充套件方案及實現分散式套件
- [ Skill ] Cadence Skill 語言入門
- cadence 開啟原理圖檔案
- Apache Cassandra——可擴充套件微服務應用程式的持久資料儲存Apache套件微服務
- PHP擴充套件開發教程2 – 編寫第一個擴充套件 hello worldPHP套件
- Golang 分散式 ID 生成系統,高效能、高可用、易擴充套件的 id 生成服務Golang分散式套件
- 使用Kotlin擴充套件函式擴充套件Spring Data案例Kotlin套件函式Spring
- Analytics Zoo Cluster Serving自動擴充套件分散式推理套件分散式
- 讀構建可擴充套件分散式系統:方法與實踐08微服務套件分散式微服務
- MySQL中InnoDB引擎對索引的擴充套件MySql索引套件
- 管理系統中風險是系統可用性和可擴充套件性的關鍵套件
- BeanDefinition註冊流程、spring 擴充套件點一(NamespaceHandler)BeanSpring套件namespace
- WPF如何封裝一個可擴充套件的Window封裝套件
- Linux下編寫一個PHP擴充套件LinuxPHP套件
- 讀構建可擴充套件分散式系統:方法與實踐03分散式系統要點套件分散式
- Kotlin擴充套件函式Kotlin套件函式
- 讀構建可擴充套件分散式系統:方法與實踐11強一致性套件分散式