MySQL分優化之超大頁查詢
背景
基本上只要是做後臺開發,都會接觸到分頁這個需求或者功能吧。基本上大家都是會用MySQL的LIMIT來處理,而且我現在負責的專案也是這樣寫的。但是一旦資料量起來了,其實LIMIT的效率會極其的低,這一篇文章就來講一下LIMIT子句優化的。
LIMIT優化
很多業務場景都需要用到分頁這個功能,基本上都是用LIMIT來實現。
建表並且插入200萬條資料:
新建一張t5表
CREATE TABLE t5
(
id
int NOT NULL AUTO_INCREMENT,
name
varchar(50) NOT NULL,
text
varchar(100) NOT NULL,
PRIMARY KEY (id
),
KEY ix_name
(name
),
KEY ix_test
(text
)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
建立儲存過程插入200萬資料
CREATE PROCEDURE t5_insert_200w()
BEGIN
DECLARE i INT;
SET i=1000000;
WHILE i<=3000000 DO
INSERT INTO t5(name
,text) VALUES(‘god-jiang666’,concat(‘text’, i));
SET i=i+1;
END WHILE;
END;
呼叫儲存過程插入200萬資料
call t5_insert_200w();
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
在翻頁比較少的情況下,LIMIT是不會出現任何效能上的問題的。
但是如果使用者需要查到最後面的頁數呢?
通常情況下,我們要保證所有的頁面可以正常跳轉,因為不會使用order by xxx desc這樣的倒序SQL來查詢後面的頁數,而是採用正序順序來做分頁查詢:
select * from t5 order by text limit 100000, 10;
1
在這裡插入圖片描述
採用這種SQL查詢分頁的話,從200萬資料中取出這10行資料的代價是非常大的,需要先排序查出前1000010條記錄,然後拋棄前面1000000條。我的macbook pro跑出來花了5.578秒。
接下來我們來看一下,上面這條SQL語句的執行計劃:
explain select * from t5 order by text limit 1000000, 10;
1
在這裡插入圖片描述
從執行計劃可以看出,在大分頁的情況下,MySQL沒有走索引掃描,即使text欄位我已經加上了索引。
這是為什麼呢?
回到MySQL索引(二)如何設計索引中有提及到,MySQL資料庫的查詢優化器是採用了基於代價的,而查詢代價的估算是基於CPU代價和IO代價。
如果MySQL在查詢代價估算中,認為全表掃描方式比走索引掃描的方式效率更高的話,就會放棄索引,直接全表掃描。
相關文章
- MySQL分頁查詢優化MySql優化
- MySQL——優化巢狀查詢和分頁查詢MySql優化巢狀
- 分頁查詢優化優化
- 資料庫全表查詢之-分頁查詢優化資料庫優化
- MySQL調優之查詢優化MySql優化
- 十七、Mysql之SQL優化查詢MySql優化
- MySQL的分頁查詢MySql
- MySQL查詢中分頁思路的優化BFMySql優化
- MySQL查詢優化MySql優化
- [玩轉MySQL之六]MySQL查詢優化器MySql優化
- MySQL優化COUNT()查詢MySql優化
- MySQL 的查詢優化MySql優化
- MySQL 慢查詢優化MySql優化
- MySQL 千萬資料庫深分頁查詢優化,拒絕線上故障!MySql資料庫優化
- 《MySQL慢查詢優化》之SQL語句及索引優化MySql優化索引
- 效能優化之分頁查詢優化
- mysql查詢優化檢查 explainMySql優化AI
- pgsql查詢優化之模糊查詢SQL優化
- Mysql優化系列之——優化器對子查詢的處理MySql優化
- 資料量很大,分頁查詢很慢,該怎麼優化?優化
- MySQL索引與查詢優化MySql索引優化
- MySQL查詢優化利刃-EXPLAINMySql優化AI
- (MySQL學習筆記)分頁查詢MySql筆記
- MySQL-效能優化-索引和查詢優化MySql優化索引
- MySQL 百萬級資料量分頁查詢方法及其最佳化MySql
- MySQL分頁查詢offset過大,Sql最佳化經驗MySql
- 【資料庫】MySQL查詢優化資料庫MySql優化
- Mysql 慢查詢優化實踐MySql優化
- MySQL: 使用explain 優化查詢效能MySqlAI優化
- mysql查詢效能優化總結MySql優化
- 如何優雅地實現分頁查詢
- MySQL 如何最佳化大分頁查詢?MySql
- Elasticsearch 分頁查詢Elasticsearch
- 查詢效率提升10倍!3種優化方案,幫你解決MySQL深分頁問題優化MySql
- MySQL查詢優化之優化器工作流程以及優化的執行計劃生成MySql優化
- MySQL 索引及查詢優化總結MySql索引優化
- 分散式任務排程內的 MySQL 分頁查詢最佳化分散式MySql
- 查詢優化優化