MySQL UNDO表空間獨立和截斷
1.
MySQL 5.5時代的undo log
在MySQL5.5以及之前,大家會發現隨著資料庫上線時間越來越長,ibdata1檔案(即InnoDB的共享表空間,或者系統表空間)會越來越大,這會造成2個比較明顯的問題:
(1)磁碟剩餘空間越來越小,到後期往往要加磁碟;
(2)物理備份時間越來越長,備份檔案也越來越大。
這是怎麼回事呢?
原因除了資料量自然增長之外,在MySQL5.5以及之前,InnoDB的undo log也是存放在ibdata1裡面的。一旦出現大事務,這個大事務所使用的undo log佔用的空間就會一直在ibdata1裡面存在,即使這個事務已經關閉。
那麼問題來了,有辦法把上面說的空閒的undo log佔用的空間從ibdata1裡面清理掉嗎?答案是沒有直接的辦法,只能全庫匯出sql檔案,然後重新初始化mysql例項,再全庫匯入。
2. MySQL 5.6時代的undo log
MySQL 5.6增加了引數innodb_undo_directory、innodb_undo_logs和innodb_undo_tablespaces這3個引數,可以把undo log從ibdata1移出來單獨存放。
下面對這3個引數做一下解釋:
(1) innodb_undo_directory,指定單獨存放undo表空間的目錄,預設為.(即datadir),可以設定相對路徑或者絕對路徑。該引數例項初始化之後雖然不可直接改動,但是可以透過先停庫,修改配置檔案,然後移動undo表空間檔案的方式去修改該引數;
(2) innodb_undo_tablespaces,指定單獨存放的undo表空間個數,例如如果設定為3,則undo表空間為undo001、undo002、undo003,每個檔案初始大小預設為10M。該引數我們推薦設定為大於等於3,原因下文將解釋。該引數例項初始化之後不可改動;
(3) innodb_undo_logs,指定回滾段的個數(早期版本該引數名字是innodb_rollback_segments),預設128個。每個回滾段可同時支援1024個線上事務。這些回滾段會平均分佈到各個undo表空間中。該變數可以動態調整,但是物理上的回滾段不會減少,只是會控制用到的回滾段的個數。
實際使用方面,在初始化例項之前,我們只需要設定innodb_undo_tablespaces引數(建議大於等於3)即可將undo log設定到單獨的undo表空間中。如果需要將undo log放到更快的裝置上時,可以設定innodb_undo_directory引數,但是一般我們不這麼做,因為現在SSD非常普及。innodb_undo_logs可以預設為128不變。
3. MySQL 5.7時代的undo log
那麼問題又來了,undo log單獨拆出來後就能縮小了嗎?MySQL 5.7引入了新的引數,innodb_undo_log_truncate,開啟後可線上收縮拆分出來的undo表空間。在滿足以下2個條件下,undo表空間檔案可線上收縮:
(1) innodb_undo_tablespaces>=2。因為truncate undo表空間時,該檔案處於inactive狀態,如果只有1個undo表空間,那麼整個系統在此過程中將處於不可用狀態。為了儘可能降低truncate對系統的影響,建議將該引數最少設定為3;
(2) innodb_undo_logs>=35(預設128)。因為在MySQL 5.7中,第一個undo log永遠在系統表空間中,另外32個undo log分配給了臨時表空間,即ibtmp1,至少還有2個undo log才能保證2個undo表空間中每個裡面至少有1個undo log;
滿足以上2個條件後,把 innodb_undo_log_truncate設定為ON即可開啟undo表空間的自動truncate,這還跟如下2個引數有關:
(1) innodb_max_undo_log_size,undo表空間檔案超過此值即標記為可收縮,預設1G,可線上修改;
(2) innodb_purge_rseg_truncate_frequency,指定purge操作被喚起多少次之後才釋放rollback segments。當undo表空間裡面的rollback segments被釋放時,undo表空間才會被truncate。由此可見,該引數越小,undo表空間被嘗試truncate的頻率越高。
4. MySQL 5.7的undo表空間的truncate示例
(1) 首先確保如下引數被正確設定:
# 為了實驗方便,我們減小該值
innodb_max_undo_log_size = 100M
innodb_undo_log_truncate = ON
innodb_undo_logs = 128
innodb_undo_tablespaces = 3
# 為了實驗方便,我們減小該值
innodb_purge_rseg_truncate_frequency = 10
(2) 建立表:
mysql> create table t1( id int primary key auto_increment, name varchar(200));
Query OK, 0 rows affected (0.13 sec)
(3)插入測試資料
mysql> insert into t1(name) values(repeat('a',200));
mysql> insert into t1(name) select name from t1;
mysql> insert into t1(name) select name from t1;
mysql> insert into t1(name) select name from t1;
mysql> insert into t1(name) select name from t1;
這時undo表空間檔案大小如下,可以看到有一個undo檔案已經超過了100M:
-rw-r----- 1 mysql mysql 13M Feb 17 17:59 undo001
-rw-r----- 1 mysql mysql 128M Feb 17 17:59 undo002
-rw-r----- 1 mysql mysql 64M Feb 17 17:59 undo003
此時,為了,讓purge執行緒執行,可以執行幾個delete語句:
mysql> delete from t1 limit 1;
mysql> delete from t1 limit 1;
mysql> delete from t1 limit 1;
mysql> delete from t1 limit 1;
再檢視undo檔案大小:
-rw-r----- 1 mysql mysql 13M Feb 17 18:05 undo001
-rw-r----- 1 mysql mysql 10M Feb 17 18:05 undo002
-rw-r----- 1 mysql mysql 64M Feb 17 18:05 undo003
可以看到,超過100M的undo檔案已經收縮到10M了。
來源:
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/25583515/viewspace-2719969/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- MySQL InnoDB Undo表空間配置MySql
- MySQL 中的共享表空間與獨立表空間如何選擇MySql
- undo表空間容量
- Innodb:Undo 表空間巨大
- 更改undo表空間大小
- UNDO表空間空間回收及切換
- 為Zabbix MySQL設定獨立表空間innodb_file_per_tableMySql
- 2.5.5 使用自動Undo管理: 建立 Undo 表空間
- MySQL 5.7新特性之線上收縮undo表空間MySql
- ORACLE線上切換undo表空間Oracle
- Oracle切換undo表空間操作步驟Oracle
- [20210527]rman與undo表空間備份.txt
- 檢查及設定合理的undo表空間
- undo表空間使用率過高解決
- oracle中undo表空間丟失處理方法Oracle
- 【UNDO】Oracle undo表空間使用率過高,因為一個查詢Oracle
- undo表空間使用率100%的原因檢視
- MySQL InnoDB表空間加密MySql加密
- MySQL 傳輸表空間MySql
- Oracle 19c 線上縮減 UNDO 表空間 容量Oracle
- mysql之 表空間傳輸MySql
- mysql收縮共享表空間MySql
- 刪除UNDO表空間並處理ORA-01548問題
- 18_深入解析Oracle undo原理(2)_undo表空間使用率100%問題處理Oracle
- 獨立IP的網站空間有什麼優勢?網站
- MySQL InnoDB臨時表空間配置MySql
- MySQL 遷移表空間,備份單表MySql
- mysql臨時表,臨時表空間,ibtmp1表空間暴增原因初探MySql
- 16、表空間 建立表空間
- 2.6.8 設定UNDO空間管理方法
- 12C關於CDB、PDB 回滾undo表空間的總結
- mysql關於表空間的總結MySql
- MySQL 增加InnoDB系統表空間大小MySql
- MySQL InnoDB File-Per-Table表空間MySql
- MySQL 系統表空間檔案解析MySql
- oracle建立臨時表空間和資料表空間以及刪除Oracle
- 臨時表空間和回滾表空間使用率查詢
- MySQL innodb表使用表空間物理檔案複製表MySql