PostgreSQL:傳統分割槽表
建立分割槽表
-
建立父表,如果父表上定義了約束,子表會繼承,因此除非是全域性約束,否則不應該在表上定義約束,另外,父表不應該寫入資料
CREATE TABLE log_ins(id serial, user_id int4, create_time timestamp(0) without time zone)
-
透過 INHERITS 方式建立繼承表,也稱之為子表或分割槽,子表的欄位定義應該和父表保持一致
-
給所有子表建立約束,只有滿足約束條件的資料才能寫入對應分割槽,注意分割槽約束至範圍不要有重疊。
create TABLE log_ins_history(CHECK(create_time < '2020-01-01')) INHERITS(log_ins); create TABLE log_ins_202001(CHECK(create_time >= '2020-01-01' and create_time < '2020-02-01')) INHERITS(log_ins); create TABLE log_ins_202002(CHECK(create_time >= '2020-02-01' and create_time < '2020-03-01')) INHERITS(log_ins); ...
-
給所有子表建立索引,由於繼承操作不會整合父表上的索引,因此索引需要手工建立。
CREATE INDEX idx_his_ctime ON log_ins_history USING btree(create_time); CREATE INDEX idx_log_ins_202001_ctime ON log_ins_202001 USING btree(create_time); CREATE INDEX idx_log_ins_202002_ctime ON log_ins_202002 USING btree(create_time); ...
-
在父表上定義 INSERT、DELETE、UPDATE 觸發器,將 SQL 分發到對應分割槽。
CREATE OR REPLACE FUNCTION log_ins_insert_trigger() RETURNS trigger LANGUAGE plpgsql AS $function$ BEGIN IF (NEW.create_time < '2020-01-01') THEN INSERT INTO log_ins_history VALUES (NEW.*); ELSIF (NEW.create_time > '2020-01-01' and NEW.create_time < '2020-02-01') THEN INSERT INTO log_ins_201701 VALUES (NEW.*); ELSIF (NEW.create_time > '2020-02-01' and NEW.create_time < '2020-03-01') THEN INSERT INTO log_ins_201702 VALUES (NEW.*); ... ELSE RAISE EXCEPTION 'create_time out of range. Fix the log_ins_insert_trigger() function!'; END IF; RETURN NULL; END; $function$
-
啟用 constraint_exclusion 引數,如果這個引數設定成 off,則父表上的 SQL 效能會降低。
使用分割槽表
在實際生產過程中,對於傳統分割槽表分割槽方式,不建議應用訪問父表,而是直接訪問子表。
constraint_exclusion 引數
-
ON:所有表都透過約束最佳化查詢
-
OFF:所有表都不透過約束最佳化查詢
-
PARTITION:只有繼承表和 UNION ALL 子查詢透過檢索約束來最佳化查詢;
新增分割槽
-
建立分割槽
CREATE TABLE log_ins_202101(LIKE log_ins INCLUDING ALL)
-
新增約束
ALTER TABLE log_ins_202101 AND CONSTRAINT log_ins_202101_create_time_check CHECK(create_time >= '2021-01-01' and create_time < '2021-02-01')
-
更新觸發器
-
將分割槽繼承父表
ALTER TABLE log_ins_202101 INHERIT log_ins
刪除分割槽
DROP TABLE log_ins_202001; ALTER TABLE log_ins_202001 NO INHERIT log_ins;
檢視分割槽
-
\d
\d log_in
-
SELECT
SELECT nmsp_parent.nspname AS parent_schema, parent.relname AS parent, nmsp_child.nspname AS child_schema, child,relname AS child_table FROM pg_inherits JOIN pg_class parent ON pg_inherits.inhparent = parent.oid JOIN pg_class child ON pg_inherits.inhrelid = child.oid JOIN pg_namespace nmsp_parent ON nmsp_parent.oid = parent.relnamespace JOIN pg_namespace nmsp_child ON nmsp_child.oid = child.relnamespace WHERE parent.relname = 'log_ins'
-
統計
SELECT nspname, relname, count(*) AS partition_num FROM pg_class c JOIN pg_namespace n ON c.relnamespace = n.oid JOIN pg_inherits i ON c.oid = i.inhparent WHERE c.relhassubclass AND c.relkind in ('r','p') GROUP BY 1, 2 ORDER BY partition_num DESC
注意事項
-
當往父表插入資料時,需事先在父表上建立路由函式和觸發器,資料才會根據分割槽鍵路由規則插入到對應分割槽中,目前僅支援範圍分割槽和列表分割槽。
-
分割槽表上的索引、約束需要使用單獨的命令建立,目前沒有辦法一次性自動在所有分割槽上建立索引、約束。
-
父表和子表允許單獨定義主鍵,因此父表和子表可能存在重複的主鍵記錄,目前不支援在分割槽表上定義全域性主鍵。
-
UPDATE 時不建議更新分割槽鍵資料,特別是會使資料從一個分割槽移動到另一個分割槽的場景,可透過更新觸發器實現,但會帶來管理上的成本。
-
效能方面:傳統分割槽表根據非分割槽鍵查詢相比普通表效能差距較大,因為這種場景下分割槽會掃描所有分割槽;根據分割槽鍵查詢相比普通表效能有小幅降低,而查詢分割槽表子表效能相比普通表略有提升;
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31490526/viewspace-2742065/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- PostgreSQL/LightDB 分割槽表之分割槽裁剪SQL
- PostgreSQL:內建分割槽表SQL
- PostgreSQL分割槽表更新思路SQL
- PostgreSQL使用表繼承實現分割槽表SQL繼承
- PostgreSQL/LightDB分割槽表之常見問題SQL
- oracle分割槽表和分割槽表exchangeOracle
- PostgreSQL分割槽表、繼承表記錄去重方法SQL繼承
- oracle分割槽表和非分割槽表exchangeOracle
- postgresql 9.6 分割槽表測試方案與記錄SQL
- PostgreSQL11preview-分割槽表增強彙總SQLView
- PostgreSQL 原始碼解讀(98)- 分割槽表#4(資料查詢路由#1-“擴充套件”分割槽表)SQL原始碼路由套件
- PG的非分割槽表線上轉分割槽表
- 【MYSQL】 分割槽表MySql
- 非分割槽錶轉換成分割槽表
- [oracle] expdp 匯出分割槽表的分割槽Oracle
- Oracle分割槽表基礎運維-07增加分割槽(3列表分割槽)Oracle運維
- oracle 分割槽表move和包含分割槽表的lob moveOracle
- 移動分割槽表和分割槽索引的表空間索引
- PostgreSQL 原始碼解讀(96)- 分割槽表#3(資料插入路由#3-獲取分割槽鍵值)SQL原始碼路由
- Oracle分割槽表基礎運維-04列表分割槽Oracle運維
- Oracle分割槽表基礎運維-07增加分割槽(2 HASH分割槽)Oracle運維
- 分割槽表-實戰
- MySQL 分割槽表探索MySql
- PostgreSQL LIST分割槽實現:繼承表+函式+觸發器。SQL繼承函式觸發器
- PostgreSQL9.x,10,11hash分割槽表用法舉例SQL
- Oracle分割槽表基礎運維-06分割槽表索引Oracle運維索引
- 【Linux】MBR磁碟分割槽表只能有四個分割槽?Linux
- oracle 線上重新定義,普通表改變分割槽表,分割槽表可以更改型別、分割槽欄位等Oracle型別
- Oracle分割槽表基礎運維-07增加分割槽(1範圍分割槽)Oracle運維
- Oracle分割槽表基礎運維-01分割槽表分類Oracle運維
- Oracle分割槽表基礎運維-09刪除分割槽Oracle運維
- Oracle分割槽表基礎運維-05組合分割槽Oracle運維
- Oracle分割槽表基礎運維-02範圍分割槽Oracle運維
- Oracle分割槽表基礎運維-03HASH分割槽Oracle運維
- 分割槽表之自動增加分割槽(11G)
- PostgreSQL 原始碼解讀(92)- 分割槽表#1(資料插入路由#1)SQL原始碼路由
- PostgreSQL 原始碼解讀(94)- 分割槽表#2(資料插入路由#2)SQL原始碼路由
- Mysql表分割槽實操MySql