CnosDB的資料更新和刪除
功能介紹
-
支援更新 Tag 值。
-
支援更新 Field 值。
-
支援刪除資料。
update clause := UPDATE <table name> SET <assignment clause> [, ...] [<WHERE clause>] assignment clause := <column name> = <column value> delete clause := DELETE FROM <table name> <WHERE clause>
基本原理
由於 Tag 值與 Field 值,在儲存引擎中的儲存形式及位置不同,所以更新邏輯也不同。
更新 Tag 值
Tag 值在儲存引擎中作為索引單獨儲存。所以對於 Tag 更新操作,需要更新索引。
步驟如下:
-
在 query 層根據 SQL 中的 tag 過濾條件,查詢出符合條件的所有 series。
-
向所有匹配的節點發出預更新請求,檢查是否會產生衝突,即原有的不同的 series 更新後成為相同的 series。如有衝突則本次 SQL 請求失敗。
-
檢查透過後,會提交實際的更新任務,此任務會在故障後重試,保證任務執行成功。
-
儲存引擎節點在接收到更新請求後,會首先記錄 UpdateSeriesKeys 型別的 WAL,然後更新索引。
執行計劃(簡化版)
UpdateTagValue Filter TagScan
更新 Field 值
根據 SQL 中的 WHERE 條件查詢表中資料,更新 Field 值後重新插入表中,利用 tskv 表的去重特性達到更新目的。
執行計劃(簡化版)
TableWriter Projection Filter TableScan
刪除資料
按 WHERE 條件過濾並刪除表中的資料,只支援針對 Tag 或 Time 列的表示式。
執行流程(簡化版)
DeleteFromTableTask Coordinate DML task on vnodes Vnode delete execution
示例演示
準備資料
ALTER DATABASE public SET ttl '1000000d'; DROP TABLE IF EXISTS dml_tbl; CREATE TABLE IF NOT EXISTS dml_tbl(f0 BIGINT , f1 BIGINT , TAGS(t0, t1) ); INSERT dml_tbl(TIME, f0, f1, t0, t1) VALUES ('1999-12-31 00:00:00.000', 111, 444, 'tag11', 'tag21'), ('1999-12-31 00:00:00.005', 222, 444, 'tag12', 'tag22'), ('1999-12-31 00:00:00.010', null, 222, 'tag12', 'tag23'), ('1999-12-31 00:00:10.015', 444, 111, 'tag14', 'tag24'), ('1999-12-31 00:00:10.020', 222, 555, 'tag14', 'tag21'), ('1999-12-31 00:10:00.025', 333, 555, 'tag11', 'tag22'), ('1999-12-31 00:10:00.030', 444, 333, 'tag11', 'tag23'), ('1999-12-31 01:00:00.035', 555, 222, 'tag14', 'tag24');
更新 Tag 值
UPDATE dml_tbl SET t0 = 'tag_new11', t1 = 'tag_new21' WHERE t0 = 'tag11' AND t1 = 'tag21'; +-------------------------+-----------+-----------+-----+-----+ | time | t0 | t1 | f0 | f1 | +-------------------------+-----------+-----------+-----+-----+ | 1999-12-31T00:00:00 | tag_new11 | tag_new21 | 111 | 444 | | 1999-12-31T00:00:00.005 | tag12 | tag22 | 222 | 444 | | 1999-12-31T00:00:00.010 | tag12 | tag23 | | 222 | | 1999-12-31T00:00:10.015 | tag14 | tag24 | 444 | 111 | | 1999-12-31T00:00:10.020 | tag14 | tag21 | 222 | 555 | | 1999-12-31T00:10:00.025 | tag11 | tag22 | 333 | 555 | | 1999-12-31T00:10:00.030 | tag11 | tag23 | 444 | 333 | | 1999-12-31T01:00:00.035 | tag14 | tag24 | 555 | 222 | +-------------------------+-----------+-----------+-----+-----+