各位熱愛 Apache SeaTunnel 的小夥伴們,社群10月份月報來啦,請查收!
這裡將記錄Apache SeaTunne社群每月動態和進展,歡迎關注。
月度Merge之星
感謝以下小夥伴上個月為 Apache SeaTunnel 所做的精彩貢獻(排名不分先後):
@Hisoka-X,@prclin,@JohnTeslaa,@happyboy1024,@jiamin13579,@luckyLJY,@CosmosNi,@zhangshenghang,@xxsc0529,@zhilinli123,@hawk9821,@JeremyXin,@czshh0628,@shashwatsai,@arshadmohammad,@corgy-w,@YOMO-Lee,@BilwaST,@nianliuu,@QiaoJ-Chen,@chl-wxp,@dependabot[bot],@wuchunfu,@XenosK,@TyrantLucifer,@hailin0,@liunaijie,@lm-ylj,@liugddx,@dailai,@Asura7969
apache/seatunnel倉庫
Fix
- [Fix][Connector-V2]修復CDC在值為null時使用預設值 @Hisoka-X
- [Bug][Core]本地模式取消執行的 JobStatusRunner @zhangshenghang
- [Fix][Connector-V2]修復檔案二進位制格式同步轉換目錄為檔案 @zhangshenghang
- [Fix][CI]修復由設定
classloader-cache-mode
為true
引起的 CI 錯誤 @Hisoka-X - [Fix][Connector-V2]修復了在多個並行情況下無法停止ClickHouse聯結器的問題 @YOMO-Lee
- [Hotfix][CDC]修復偶爾出現的資料庫連線洩漏問題當讀取快照拆分時 @hailin0
- [Fix][Connector-V2]修復 Hana 型別精度丟失問題 @Hisoka-X
- [Fix] [Flink/Spark]修復 Flink/Spark 轉換流在未配置 source_table_name 時選擇錯誤的問題 @CosmosNi
- [Fix][Doc]修正hive-jdbc配置中的
useKerberos
為use_kerberos
。 @czshh0628 - [Hotfix][Config]修復配置鍵排序混亂問題 @hailin0
- [Fix][Doc]修復jetty文件錯誤 @zhangshenghang
- [Fix][Doc]修復中文文件構建錯誤 @Hisoka-X
- [Fix][connector-v2]修復 Paimon 表聯結器錯誤日誌資訊。 @luckyLJY
- [Fix][Connector-V2][connector-file-base-hadoop]修復了HdfsFile源載入krb5_path配置的問題 @JeremyXin
- [Fix][Connector-V2][FTP]修復FTP聯結器的
connection_mode
無效的問題 @zhangshenghang - [Fix][Zeta]修復工作節點指標獲取 @corgy-w
- [Fix][Connector-V2]修復 Kafka
format_error_handle_way
不起作用的問題 @Hisoka-X - [Fix][Connector-V2]Oceanbase向量資料庫被新增為源伺服器。 @xxsc0529
- [Bug] [connectors-v2]Hadoop Source/Sink 失敗,錯誤為“無法找到有效的 Kerberos 票據”。 @shashwatsai
- [bugfix][core]修復指標與節點之間關聯錯誤的問題 @liugddx
- [Fix][Connector-V2]修復 當讀取Excel資料時,字串和日期型別轉換錯誤 @CosmosNi
- [Hotfix][Zeta]修復Hazelcast客戶端應透過系統環境變數覆蓋叢集地址 @liunaijie
- [Fix][Connector-V2]修復 AbstractSingleSplitReader 在進行檢查點時無用的鎖定問題 @CosmosNi
- [Hotfix][Core][Flink]SeaTunnel Flink 引擎支援在 YARN 上的應用模式。 @TyrantLucifer
Improve
- [Improve][Doc]修復中文文件缺少Grafana儀表板配置的問題 @corgy-w
- [Improve]更新 ClickHouse 聯結器,使用工廠建立源/ sink @liunaijie
- [Improve][Doc]新增一些聯結器圖示 @zhangshenghang
- [Improve][Zeta]將類載入器快取模式的預設值設定為true。 @dailai
- [Improve][Iceberg]支援目錄的表註釋 @hailin0
- [Feature][Zeta]新增COS支援以用於檢查點儲存 @lm-ylj
- [Improve][Doc]在文件中新增
file_filter_pattern
示例。 @YOMO-Lee - [Improve][RestApi]統一REST API V1和V2的程式碼邏輯 @liugddx
- [Improve][Rest api]新增 verifyHtmlResponse 測試用例 @liugddx
- [Improve][Connector-V2]改進當型別為十進位制時,從路徑和查詢合併表的JDBC功能。 @Hisoka-X
- [Improve][Connector-V2][FTP]刪除重複的程式碼 @zhangshenghang
- [Improve][Core]新增protobuf轉換測試用例 @zhangshenghang
- [Improve][Core]重構列/行的通用選項 @Hisoka-X
- [Improve][Zeta]Jetty伺服器啟用動態埠 @corgy-w
- [Feature][Doris]支援多表源讀取 @happyboy1024
- [Improve][Connector-V2]Redis 支援自定義鍵和值 @lm-ylj
- [Feature] [connector-milvus]更新 Milvus 聯結器以支援動態模式、重試失敗等功能。 @nianliuu
- [Feature][Transform-SQL]支援生成UUID的SQL轉換功能 @zhilinli123
- [Improve][E2E]修改獲取JobId的方法 @hawk9821
- [Feature][Connector-V2]Jdbc DB2 支援 Upsert SQL @shashwatsai
- [Improve][Example]改進zeta本地/叢集示例 @hailin0
- [Improve][Example]新增作業mdc的日誌配置 @hailin0
- [Improve][Jdbc]最佳化在建立表時對於 PostgreSQL 的索引名稱衝突問題 @hailin0
- [Improve][Doc]修正日誌中的拼寫錯誤 @Hisoka-X
- [Improve]移動AlterTableNameEvent父類 @hailin0
- [Improve]將快照版本更新為2.3.9 @liunaijie
- [Improve][Connector-V2]新增帶有註釋的doris/starrocks建立表語句 @Hisoka-X
- [Feature][Connector-V2]支援將 CDC 變更日誌事件寫入 Hudi 資料sink。 @happyboy1024
- [Improve]將快照版本更新為2.3.9 @liunaijie
- [Improve][Formats]支援非主鍵表的 Debezium 格式 @hailin0
- [Improve][Connector-v2]使用 checkpointId 作為流式寫入 paimon sink 的提交標識,而不是使用雜湊。 @dailai
- [Feature][Connector-V2]Piamon Sink 支援 changelog-producer,模式為 lookup 和 full-compaction。 @hawk9821
- [Improve][Sls]新增SLS Sink聯結器、端到端測試、文件 @XenosK
- [Improve][Connector-V2]更改檔案讀取/寫入策略從
setSeaTunnelRowTypeInfo
到setCatalogTable
@Hisoka-X - [Improve][Doc]更新遙測文件 @corgy-w
- [Improve][api]最佳化
AlterTableColumnEvent
的繼承關係 @hailin0 - [Feature][Connector-V2]SFTP檔案源支援多個表 @chl-wxp
- [Improve][Fake]提高當拆分大小較大時的記憶體使用情況 @hailin0
- [Improve][Jdbc]支援 PostgreSQL 的 inet 型別。 @CosmosNi
- [Feature][Zeta][Core]支援獲取日誌的API @zhangshenghang
- [Improve][Docs]編輯關於Opengauss-CDC的startup.mode描述 @dailai
- [Improve][Jdbc]支援jdbc-dm的sink的儲存模式 @dailai
- [Improve][PostgreSQL CDC]-PostgresSourceOptions 描述錯誤 @Asura7969
- [Improve][rest api]改進REST API文件 @liugddx
- [Improve][Doc]對於獲取容器IP的Docker文件更正,請不要翻譯專有名詞如Apache SeaTunnel的修復和功能。 更正Docker文件以獲取容器IP。 @Hisoka-X
- [Improve][RestApi]將上下文路徑更新為預設路徑/ @liugddx
- [Feature][Connector-V2]FTP檔案源支援多個表 @chl-wxp
- [Improve][Api]支援同時配置條件和可選選項。 @corgy-w
- [Feature][Restapi]允許將指標資訊關聯到邏輯計劃節點上。 @liugddx
- [Improve][Transform]新增LLM模型提供商微軟。 @corgy-w
- [Improve][doc]改進startrocks源文件 @jiamin13579
- [Feature][transforms-v2]支援從CDC源追加-only流 @hawk9821
- [Feature][Zeta]提交作業排程支援待處理 @zhangshenghang
- [Feature][Rest api]使用Jetty替換Hazelcast原生REST API,請注意不要翻譯“Apache SeaTunnel”這個 proper noun。但如果上下文中涉及到“SeaTunnel”,請保持原樣不翻譯。根據你的要求,這裡只涉及到了“Jetty”和“Hazelcast”,這兩個詞將保持不變。 @liugddx
- [Feature][connector-v2]支援使用opengauss驅動的JDBC聯結器。 @luckyLJY
- [Feature][Engine UI]引擎的部分頁面 @QiaoJ-Chen
- [Feature][Connector-V2]新增Prometheus源和sink @CosmosNi
其他
- 升級 /seatunnel-connectors-v2/connector-clickhouse 中的 commons-io:commons-io 從 2.11.0 到 2.14.0 @dependabot[bot]
- [Improvment][Build]提供禁用原始碼jar建立的選項。 @arshadmohammad
apache/seatunnel-website倉庫
Improve
- [Improve][Team]新增 committer 名為 Mohammad Arshad @arshadmohammad
- [Improve]更新站點地圖以改善搜尋結果 @Hisoka-X
- [Improve][Team]新增 committer 名為 Lai Dai @dailai
- [Improve]新增Matomo整合以進行網站分析 @Hisoka-X
其他
- Seatunnel-Web 1.0.2 版本更新 @arshadmohammad
- 更新發布流程文件 @liunaijie
- 更新部署.md @prclin
- 新增發行文件 2.3.8 @liunaijie
apache/seatunnel-web倉庫
Fix
- [Bug] [Seatunnel-web]分頁功能不起作用。 @BilwaST
- [Bug][Seatunnel-web][Addendum]轉義 SeaTunnel-web 佔位符 @arshadmohammad
- [Bug][Seatunnel-web]
download_datasource.sh
失敗,因為缺少mvnw
命令。 @arshadmohammad - [Bug][Seatunnel-web]轉譯:替換 seatunnel-web 佔位符 @arshadmohammad
- [Bug] [Seatunnel-web]HiveJDBC 不應被用作目標資料來源。 @arshadmohammad
- [Bug][Seatunnel-web][Hive]篩選系統資料庫 @arshadmohammad
- [Bug] [Seatunnel-web] [HiveJDBC]重複的列在源中顯示。 @arshadmohammad
Improve
- [Improve][Doc]在文件中新增相容性部分。 @Hisoka-X
- [Improve]使用 generate_sink_sql=true 進行 DB2 更新操作 @shashwatsai
- [Improvement] [Seatunnel-web]新增支援以提供作業失敗的原因… @BilwaST
- [Improvement][Seatunnel-web]文件佔位符功能 @arshadmohammad
- [Improve][SeaTunnel-Web]更新README_CN.md為版本2.3.8 @wuchunfu
- [Improvement][Seatunnel-web]升級SeaTunnel版本從2.3.7到2.3.8 @arshadmohammad
其他
- [Build]將快照版本更新為1.0.3 @arshadmohammad
- [Doc]初始化部署README最佳化 @JohnTeslaa
本文由 白鯨開源 提供釋出支援!