MySQL 提高Insert效能

pursuer.chen發表於2016-04-06
MySql

插入一個記錄需要的時間由下列因素組成，其中的數字表示大約比例：

  • 連線：(3)
  • 傳送查詢給伺服器：(2)
  • 分析查詢：(2)
  • 插入記錄：（1x記錄大小）
  • 插入索引：（1x索引）
  • 關閉：(1)

這不考慮開啟表的初始開銷，每個併發執行的查詢開啟。

表的大小以logN (B樹)的速度減慢索引的插入。

加快插入的一些方法：

 

  • 如果同時從同一個客戶端插入很多行，使用含多個VALUE的INSERT語句同時插入幾行。這比使用單行INSERT語句快(在某些情況下快幾倍)。如果你正向一個非空表新增資料，可以調節bulk_insert_buffer_size變數，使資料插入更快。
  • 如果你從不同的客戶端插入很多行，能通過INSERT DELAYED語句加快速度。
  • 用MyISAM，如果在表中沒有刪除的行，能在SELECT語句正在執行的同時插入行。
  • 當從一個文字檔案裝載一個表時，使用LOAD DATA INFILE。這通常比使用很多INSERT語句快20倍。
  • 當表有很多索引時，有可能要多做些工作使得LOAD DATA INFILE更快些。使用下列過程：
有選擇地用CREATE TABLE建立表。 
執行FLUSH TABLES語句或命令mysqladmin flush-tables。 
使用myisamchk --keys-used=0 -rq /path/to/db/tbl_name。這將從表中取消所有索引的使用。 
用LOAD DATA INFILE把資料插入到表中，因為不更新任何索引，因此很快。 
如果只想在以後讀取表，使用myisampack壓縮它。參見15.1.3.3節，“壓縮表特性”。 
用myisamchk -r -q /path/to/db/tbl_name重新建立索引。這將在寫入磁碟前在記憶體中建立索引樹，並且它更快，因為避免了大量磁碟搜尋。結果索引樹也被完美地平衡。 
執行FLUSH TABLES語句或mysqladmin flush-tables命令。
  • 鎖定表可以加速用多個語句執行的INSERT操作

這樣效能會提高，因為索引快取區僅在所有INSERT語句完成後重新整理到磁碟上一次。一般有多少INSERT語句即有多少索引快取區重新整理。如果能用一個語句插入所有的行，就不需要鎖定。對於事務表，應使用BEGIN和COMMIT代替LOCK TABLES來加快插入。

INSERT、UPDATE和DELETE操作在MySQL中是很快的，通過為在一行中多於大約5次連續不斷地插入或更新的操作加鎖，可以獲得更好的整體效能。如果在一行中進行多次插入，可以執行LOCK TABLES，隨後立即執行UNLOCK TABLES(大約每1000行)以允許其它的執行緒訪問表。這也會獲得好的效能。

--鎖表
LOCK TABLES `order` WRITE;
--禁用鍵
ALTER TABLE `order` DISABLE KEYS ;
--插入資料
INSERT INTO `order` VALUES (1,11,'UPDATED');
INSERT INTO `order` VALUES (2,11,'UPDATED');
--啟用鍵
 ALTER TABLE `order` ENABLE KEYS; 

--解鎖表 
UNLOCK TABLES;
  •  為了對LOAD DATA INFILE和INSERT在MyISAM表得到更快的速度，通過增加key_buffer_size系統變數來擴大 鍵高速緩衝區

相關文章