資料工作流 | 一站式雲上資料智慧解決方案

雲端儲存小天使發表於2021-04-23

隨著全球數字化程式的加速推進，以及 5G、人工智慧等技術的快速發展，全球資料量飛速增長。根據國際權威機構 Statista 的預測¹，2025年全球資料產生量預計達到 175ZB（ZB 為位元組計量單位，1ZB = 1012GB），而到2035年，這一資料將達到 2142ZB。

然而，資料作為重要戰略資源，尚未得到充分有效的利用。根據 IDC 和希捷科技²的調研預測，未來兩年，企業資料將以 42.2% 的速度保持高速增長。但是呢，僅有 32% 的資料得到了利用，企業資料管理仍然面臨著諸多問題。

① 資料工作流全新上線！

如何上傳時自動觸發資料分析處理？
如何靈活組合複雜的多步資料處理邏輯？
如何高效處理大量併發的資料分析任務？

針對上述問題，騰訊雲 COS 全新推出了一套完整的端到雲到端的資料儲存、處理、釋出等“一站式”雲上智慧解決方案——資料工作流。通過資料工作流，您可以快速、靈活、按需搭建資料處理流程（如轉碼、水印、拼接、截圖等），工作流將複雜的資料處理邏輯流程化、例項化、模版化，使用者只需要關注處理任務的流程順序編排，對上傳到 COS 的檔案按照指定的工作流進行自動化處理，避免了複雜的邏輯開發以及併發處理工作。

② 如何使用工作流

資料工作流的使用流程如下：

第一步，使用者在控制檯上配置工作流。工作流配置提供圖形化介面，方便使用者直觀便捷的構建資料處理流程，同時提供了轉碼、水印、截幀、拼接、轉動圖、智慧封面、語音識別、文件預覽等豐富的 AI 處理能力，使用者可以自定義處理引數，也可以使用預置的處理模版來配置處理任務。工作流支援多個處理序列、並行操作，以便使用者靈活編排任務處理流程。

第二步，使用者上傳資料檔案到 COS。

第三步，自動觸發資料工作流執行。工作流通過 COS 上傳觸發執行或 API 手動觸發執行，覆蓋資料處理的各種使用場景。當觸發工作流執行後，任務會進入佇列中進行排列，根據優先順序和提交順序依次執行。

上傳資料到 COS 觸發工作流
工作流與 COS 儲存桶的一個路徑繫結，當檔案上傳至該路徑時，該工作流就會被自動觸發，執行指定的處理操作，並將處理結果自動儲存至輸出儲存桶的指定路徑下。
API 單次觸發工作流
如果使用者希望對單個物件或者一類物件進行處理，可以通過 API 手動觸發的方式，來指定某個物件（需儲存在 COS 中）立即執行某個特定的工作流。

第四步，資料處理完後傳送訊息給使用者。資料處理成功後會將處理結果自動儲存至輸出儲存桶的指定路徑下，並將工作流的處理結果按照回撥配置傳送到指定的回撥地址。同時，使用者可以登入控制檯檢視具體工作流的執行情況，以及工作流中各個任務節點的執行情況。