HStreamDB 最新版本 v0.9 現已正式釋出！

v0.9 主要有以下亮點更新：

- stream 分割槽模型擴充套件，支援使用者直接訪問分割槽上指定位置的資料；
- 新增 HStreamDB 的內部資料整合框架 HStream IO；
- 叢集轉用基於 SWIM 的成員發現和故障檢測機制；
- 全新的流處理引擎；
- 升級了 Java 和 Go 客戶端，並新增了 Python 客戶端。

## Stream 分割槽模型擴充套件

v0.9 對之前的分割槽模型進行了擴充套件，允許使用者直接操作和訪問 stream 內部的分割槽，從而可以對 stream 中的資料分佈和分割槽伸縮排行精細化控制。HStreamDB 採用的是 key-range-based 分割槽機制，stream 下的所有分割槽共同劃分整個 key space，每個分割槽歸屬一段連續的子空間(key range)。若 record 所帶 partitionKey 的雜湊值落在某個子空間內，那麼這條 record 將會被儲存在對應的分割槽中。

具體地，v0.9 的分割槽模型新增了以下能力:

- 在建立 stream 的時候配置初始分割槽數
- 透過 `partitionKey` 將寫入的 record 分發到相應的 stream 的分割槽
- 直接從任意位置讀取指定分割槽的資料
- 檢視 stream 包含的分割槽和各個分割槽對應的 key range

在之後的版本中，我們將支援透過分割槽分裂和合並對 stream 進行動態伸縮。

## HStream IO 釋出

HStream IO 是 v0.9 包含的一個內部資料整合框架，包含 source connectors、sink connectors、IO runtime 等元件，它能夠實現 HStreamDB 和多種外部系統的互聯互通，促進資料在整個企業資料棧內的高效流轉以及實時價值釋放。

v0.9 提供了以下的 connectors，可支援多種資料庫之間的增量同步。

Source connectors:

- [source-mysql](https://github.com/hstreamdb/hstream-connectors/blob/main/docs/specs/sink_mysql_spec.md)
- [source-postgresql](https://github.com/hstreamdb/hstream-connectors/blob/main/docs/specs/source_postgresql_spec.md)
- [source-sqlserver](https://github.com/hstreamdb/hstream-connectors/blob/main/docs/specs/source_sqlserver_spec.md)

Sink connectors:

- [sink-mysql](https://github.com/hstreamdb/hstream-connectors/blob/main/docs/specs/sink_mysql_spec.md)
- [sink-postgresql](https://github.com/hstreamdb/hstream-connectors/blob/main/docs/specs/sink_postgresql_spec.md)

使用者可以透過對應的 SQL commands 建立和管理 IO task，具體可參考[文件](https://hstream.io/docs/en/latest/io/overview.html)瞭解 HStream IO 的功能和使用。

## 新的流處理引擎

v0.9 基於迭代和差分計算原理重新實現了流處理引擎，顯著提升了吞吐量，並降低了延遲。此外，新的引擎還支援多路 Join 語句、子查詢(sub-queries)和更普適的物化檢視(materialized view)。

該特性仍然處於開發階段，屬於實驗性的功能，使用者可以參考[ SQL 指南](https://hstream.io/docs/en/latest/guides/sql.html) 進行試用。

## 基於 Gossip 的 HServer 叢集

v0.9 對 HServer 的叢集實現進行了重構，新的實現主要採用了 gossip style 的叢集機制和基於 SWIM 的故障檢測機制，取代了上一版本中基於 ZooKeeper 的實現。新的實現將提高叢集的可擴充套件性，並減少對外部系統的依賴。

## Advertised Listeners

生產中的部署和使用可能涉及複雜的網路設定。例如，如果伺服器叢集是內部託管的，它需要一個外部可見的 IP 地址讓客戶連線到叢集，尤其是當遇到使用 docker 或者雲託管等情況，會使環境更加複雜。

為了確保來自不同網路環境的客戶端能夠與叢集進行互動，HStreamDB 0.9 支援配置 advertised listerners。在配置了 advertised listerners 後，伺服器可以根據客戶端傳送請求的埠，為不同的客戶端返回相應的地址。

## 統一的 HStream CLI

為了使 CLI 更加統一和簡易，我們已經將舊的 HStream SQL Shell 和其他一些節點管理功能遷移到新的 HStream CLI。HStream CLI 目前支援啟動互動式 SQL Shell、傳送叢集 bootstrap 請求和檢查伺服器節點狀態等功能。使用者可以透過參考 [CLI 文件](https://hstream.io/docs/en/latest/cli/cli.html)瞭解具體的使用方法。

## 基於 Grafana 的監控

v0.9 新增了透過 Prometheus 和 Grafana 對 HStreamDB 叢集進行監控的支援，HStreamDB 內部的 Metrics 將透過 exporter 儲存到 Prometheus 並最終展示在 Grafana 皮膚上。具體的部署和使用流程可以參考[文件](https://hstream.io/docs/en/latest/monitoring/grafana.html#installations-and-set-up)。

## 支援用 Helm 在 K8s 上進行部署

v0.9 提供了 HStreamDB 的 Helm Chart，現在可透過 Helm 在 K8s上快速部署 HStreamDB 叢集，更加詳細的使用步驟可以參考[文件](https://hstream.io/docs/zh/latest/deployment/deploy-helm.html)。

## 客戶端版本升級和改進

Java 客戶端 v0.9.0、Go 客戶端 v0.2.0、Python 客戶端 v0.2.0 均已釋出，提供對 HStreamDB 0.9 的支援。詳情請見：

- Java 客戶端 v0.9.0：https://github.com/hstreamdb/hstreamdb-java/releases/tag/v0.9.0
- Go 客戶端 v0.2.0：https://github.com/hstreamdb/hstreamdb-go/releases/tag/v0.2.0
- Python 客戶端 v0.2.0：https://github.com/hstreamdb/hstreamdb-py/releases/tag/v0.2.0

>版權宣告： 本文為 EMQ 原創，轉載請註明出處。
>
>原文連結：[https://hstream.io/zh/blog/hstreamdb-v-0-9-release-notes](https://hstream.io/zh/blog/hstreamdb-v-0-9-release-notes)

HStreamDB v0.9 釋出：分割槽模型擴充套件，支援與外部系統整合

相關文章